公司网络办公系统主要便于同事之间进行交流,谁知系统中的一些机密文档(如:.xsl、.word等)被搜索引擎收录,给系统安全性带来很大隐患。最后终于找到解决办法!
创建一个纯文本文件robots.txt,在这个文件中声明该网站中不想被robot访问的部分;
如:禁止所有搜索引擎访问网站的任何部分
在robots.txt文本中输入如下代码
User-agent: *
Disallow: /
最后将 robots.txt 文本文件放在网站根目录下
创建一个纯文本文件robots.txt,在这个文件中声明该网站中不想被robot访问的部分;
如:禁止所有搜索引擎访问网站的任何部分
在robots.txt文本中输入如下代码
User-agent: *
Disallow: /
最后将 robots.txt 文本文件放在网站根目录下