摘要:利用google analytics追踪搜索引擎蜘蛛(spider/robots)的爬行日志原文链接:http://www.robinli007.com/archives/271/在做搜索引擎优化中分析搜蜘蛛爬虫日志是非常重要的一步,大部分网站采取服务器日志数据 ,一般认为采用类似google analytics的页面标记法是无法捕捉搜索引擎爬虫的信息,然而两位法国google analytics的爱好者的一段代码却可以让我们轻松利用google analytics追踪搜索引擎spider的抓取信息。要做到这个功能需要做以下步骤第一步,添加一个新的profile配置文件,这个profile文件
阅读全文