随笔分类 -  网站

网站
NGINX屏蔽垃圾爬虫
摘要：if ($http_user_agent ~* (80legs.com|Abonti|AcoonBot|Acunetix|adbeat_bot|AddThis.com|adidxbot|ADmantX|AhrefsBot|AngloINFO|Antelope|Applebot|BaiduSpider 阅读全文
posted @ 2020-05-29 13:00 ☆♂安♀★ 阅读(862) 评论(0) 推荐(0) 编辑
无用的IP黑名单
摘要：无效的IP黑名单，有些还没有收集，在阿里云或者腾讯云的安全组里面设置，拦截不必要的IP，免得遭到攻击，也避免的CPU和内存过高 来源 备注82.102.21.217 拒绝 随机访问目录攻击，频繁69.30.210.242 拒绝 MJ12bot ,频繁112.124.0.114 拒绝 随意搜索目录攻击 阅读全文
posted @ 2020-05-26 19:36 ☆♂安♀★ 阅读(588) 评论(0) 推荐(0) 编辑
网站迁移服务器后CPU、内存飙升，设置robots.txt 问题
摘要：User-agent: SemrushBotDisallow: /User-agent: SemrushBot-SADisallow: /User-agent: SemrushBot-BADisallow: /User-agent: YandexBot/3.0Disallow: /User-agen 阅读全文
posted @ 2020-05-26 19:29 ☆♂安♀★ 阅读(193) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示