摘要: 查看百度或者谷歌是否来过网站,方法都比较简单。一、检测百度是否光临过你的网站登陆FTP,下载服务器目录下边的logs文件,解压成 .log并且用写字板打开,搜索一下蜘蛛的英文单词robots,假如能搜索得到,就证明百度蜘蛛曾经来过。二、检测谷歌是否光临过的你的网站在Google网站管理员指南里有这么一个小工具,通过它你可以知道Google爬虫机器人索引你的网站的时间和上一次抓取过你的网站页面的时间。这里可能有人会说,我在google搜索栏里输入“site:www.***.com”不就可以知道自己的网站被google索引的时间了吗?其实不然。因为在google爬虫机器人索引一个网站之后,是需要一 阅读全文
posted @ 2012-01-11 10:21 ishibin 阅读(640) 评论(0) 推荐(0) 编辑