摘要:
1.文件名为:robots.txt2.文件存放在网站根目录下。3.文件以ansi编码保存。示例:User-agent: *Disallow: /BBS在线robots.txt检测:http://tool.motoricerca.info/robots-checker.phtmlrobots.txt编写规范:http://www.robotstxt.org/orig.html 阅读全文
posted @ 2012-03-20 10:26 X龙 阅读(140) 评论(0) 推荐(0) 编辑