Bing今天宣布MSNBot1.1将退休,使用的新的爬虫MSN Bot 2.0b,并号称性能大有改善,提醒站长注意修改robots.txt,同时注意服务器日志,以前的user-agen字符串:
msnbot/1.1 (+http://search.msn.com/msnbot.htm)
将不再使用,新的user-agent字符串为:
msnbot/2.0b (+http://search.msn.com/msnbot.htm)
爬虫升级工作将在这周末结束。
最新相关内容:
Google搜索选项框增加页面预览功能(Page PreViews)
Google实验室推出新版相关链接(Related Links)服务
Google,Yahoo,Bing集体删除地球村索引,百度仍然保留
Google社会化搜索(Social search)进入实验阶段
Bing发布Twitter搜索,Google也将支持社会化搜索
Yahoo确认在测试实时搜索
将本文收藏到:





