Ngnix配置防采集策略
1.根据访问地址过滤。
检测到访问地址有test=这些关键词,自动跳转。
if ($request_uri ~* test=) {
return 301 http://www.wentiyi.com;
}
点击并拖拽以移动
2.根据访问地址过滤。
检测到来源地址有Baiduspider,自动跳转。
if ($http_referer ~* Baiduspider) {
return 301 https://www.wentiyi.com;
}
点击并拖拽以移动
3.根据ua过滤
检测到ua,有Baiduspider直接过滤。反正被打也会打不开,跟过滤蜘蛛一个性质!
if ($http_user_agent ~* Baiduspider) {
return 444;
}
点击并拖拽以移动
4.检测代理IP
检测代理IP是否设置
if ($proxy_add_x_forwarded_for != $remote_addr){
return 444;
}
点击并拖拽以移动