如何正确配置网站的robots.txt(转帖)
摘要：
如何正确配置网站的robots.txt文件软色曰：新站上线，最希望能够尽快被搜索引擎收录。只有收录，才有后面的许许多多SEO。 一般来说，Baidu对于新站是来者不拒，有很多都是滥竽充数，而Google相对较慢了，原因是Google对于新站都有一定的审核机制，防止一些新站利用黑帽SEO短时期内即取得较好排名，这是一个最重要的可能原因。 当然，我们并不希望搜索引擎收录网站中的任何页面。其中某些页面... 阅读全文
posted @ 2009-02-05 08:49 pyman 阅读(985) 评论(0) 推荐(0) 编辑
