2019年9月3日

Nginx防爬虫优化

摘要： 转载总结： 方式一：创建一个robots.txt文本文件，然后在文档内设置好代码，告诉搜索引擎我网站的哪些文件你不能访问。然后上传到网站根目录下面，因为当搜索引擎蜘蛛在索引一个网站时，会先爬行查看网站根目录下是否有robots.txt文件。#摘自京东cat<<EOF>robots.txtUser-a 阅读全文

posted @ 2019-09-03 22:09 hrers 阅读(938) 评论(0) 推荐(0) 编辑

nginx内核优化

摘要： 摘自其他文章：感谢分享 /proc/sys/net/ipv4/icmp_timeexceed_rate 这个在traceroute时导致著名的“Solaris middle star”。这个文件控制发送ICMP Time Exceeded消息的比率。 /proc/sys/net/ipv4/igmp_ 阅读全文

posted @ 2019-09-03 14:55 hrers 阅读(272) 评论(0) 推荐(0) 编辑