2019年11月16日
爬虫反爬
摘要： 反爬技术： 1. UA反爬：携带ua,构建有效ua池；2. Ip限制：限制同一ip的访问频率，download_delay =8,代理ip;3. 数据藏在js脚本：一般使用re提取数据；4. ajax请求（动态数据）：可以使用selenium或者pypepeer,但是效率太低，影响机器性能， 推荐直 阅读全文
posted @ 2019-11-16 11:53 柳帅 阅读(339) 评论(0) 推荐(0) 编辑
//替换成自己路径的js文件