2018年1月5日
python爬虫之scrapy模拟登录
摘要： 背景： 初来乍到的pythoner，刚开始的时候觉得所有的网站无非就是分析HTML、json数据，但是忽略了很多的一个问题，有很多的网站为了反爬虫，除了需要高可用代理IP地址池外，还需要登录。例如知乎，很多信息都是需要登录以后才能爬取，但是频繁登录后就会出现验证码（有些网站直接就让你输入验证码），这 阅读全文
posted @ 2018-01-05 11:41 Charles.L 阅读(18200) 评论(4) 推荐(2) 编辑