百度 baidu.com----Baiduspider
谷歌 google.com----Googlebot
中文版请打开以下页面
雅虎 yahoo.com----Yahoo
打开后跳转到以下页面
有道 yodao.com----YodaoBot
搜搜 soso.com----Sosospider/Sosoimagespider(网页蜘蛛/图片蜘蛛)
搜狗 sogou.com----sogou
微软 msn.com----msnbot
打开后跳转到以下页面
以下是几只收获(抓取页面)不劳动(不来流量)的蜘蛛 可以考虑禁了它们爬行 省空间流量
国外搜索引擎
gigablast.com----Gigabot
国外搜索引擎
webalta.net----WebAlta
国内的一个实验室的
apex.sjtu.edu.cn
免责声明:本站内容(文字信息+图片素材)来源于互联网公开数据整理或转载,仅用于学习参考,如有侵权问题,请及时联系本站删除,我们将在5个工作日内处理。联系邮箱:chuangshanghai#qq.com(把#换成@)

QQ客服