当前位置:首页 > 黑帽seo
各大搜索引擎蜘蛛名称
各大搜索引擎蜘蛛名称
Baiduspider 【百度】
Sogou web spider 【搜狗】
Googlebot 【谷歌】
360Spider 【360】
YisouSpider 【神马】
Bytespider 【今日头条】
Bingbot 【必应】
Sosospider 【搜搜】
MSNBot,MSNot-media(MSN蜘蛛)
Yahoo! Slurp China(雅虎中国)或 Yahoo! Slurp(雅虎英文)
下面的蜘蛛建议屏蔽
YoudaoBot【有道】
JikeSpider【即刻】
EasouSpider(宜搜蜘蛛)
YYSpider:据说是个人写的蜘蛛程序
ToutiaoSpider(头条号)
MJ12bot: 英国的一个搜索引擎
YandexBot:国外的一个网站分析平台
Rogerbot:Moz 网站的机器人
DotBot Moz 的官方机器人 DotBot
exabot:Exalead或Dassault Systemes网站的机器人。
ia_archiver(Alexa蜘蛛):Alexa 的网站和网站审计爬虫。
Teoma:是美国 Ask Jeeves 搜索引擎的蜘蛛,在美国占 5% 的搜索份额。
gigabot:搜索到的是一个 3D 打印公司,没什么乱用,屏蔽即可。
DOCOMO Sprider:日本 NTT DoCoMo 旗下的搜索引擎蜘蛛,是垃圾搜索引擎爬虫,有看到你的日志里面有这只蜘蛛,直接毫不犹豫的禁掉。
AhrefsBot:国外的一个网站监控工具
SemrushBot:应该也是一个网站分析工具。
版权声明:
博主在此发文(包括但不限于汉字、拼音、拉丁字母)均为随意敲击键盘所出,用于检验本人电脑键盘录入、屏幕显示的机械、光电性能,并不代表本人局部或全部同意、支持或者反对观点
如需要详查请直接与键盘生产厂商法人代表联系。挖井挑水无水表,不会网购无快递。
文章内容除非注明原创,否则来源于互联网,不代表本人的任何立场;涉及到的软件来源于互联网,仅供个人下载使用,请勿用于商业用途,版权归软件开发者所有,下载后请于24小时内删除,请支持正版!
因下载本站任何资源造成的损失,全部责任由使用者本人承担!
如果你是版权方,认为本文内容对您的权益有所侵犯,请联系博主,待博主进行严格地审查和背景调查后,情况属实的将在三天内将本文删除或修正。
博主的文章没有高度、深度和广度,只是凑字数。由于博主的水平不高(其实是个菜B),不足和错误之处在所难免,希望大家能够批评指出。