摘要: 在博客侧边栏公告(支持HTML代码) (支持 JS 代码)加入下面1行代码便可以拥有同博主的樱花特效. 樱花特效 <script src="https://files.cnblogs.com/files/quaint/sakuraPlus.js"></script> 阅读全文
posted @ 2022-09-27 10:17 大da脸 阅读(40) 评论(0) 推荐(0) 编辑
摘要: 如何使用robots禁止各大搜索引擎爬虫爬取网站 一、总结 一句话总结:假如此网站禁止爬虫抓取,那么,只要在网站的根目录下,创建一个robots.txt文件 User-agent: * Disallow: / 就可以了.. 1、搜索引擎在爬取网站前会做什么? 一般来说搜索引擎爬取网站时都会,先读取下 阅读全文
posted @ 2022-09-27 09:15 大da脸 阅读(1057) 评论(0) 推荐(0) 编辑