2020年1月18日
爬虫之反爬机制及代理IP
摘要： 反爬机制： robots.txt协议 UA检测、referer检测 数据加密 图片懒加载 ip检测 验证码识别 字体反爬虫 可以使用Python的urllib模块查看robots.txt from urllib import robotparser rp = robotparser.RobotFil 阅读全文
posted @ 2020-01-18 18:12 始终不够啊 阅读(551) 评论(0) 推荐(0) 编辑