2022年10月9日
反爬系列（一）:refer和cookie
摘要： 1.一个平时爬的好好的网站，最近遇到了ddos攻击，于是上了一个waf服务，结果我的爬虫一运行就把我的ip给封了。一开始以为永久被封了，后来发现隔个几小时又可以了。后来发现只要在爬取他的domain/page-1.htm这种页面时把refer和cookie在Header上给加上就好了。 2. 最新遇 阅读全文
posted @ 2022-10-09 15:21 zjhgx 阅读(20) 评论(0) 推荐(0) 编辑