会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
Charles.L
人生苦短
博客园
首页
新随笔
联系
订阅
管理
2018年1月5日
python爬虫之scrapy模拟登录
摘要: 背景: 初来乍到的pythoner,刚开始的时候觉得所有的网站无非就是分析HTML、json数据,但是忽略了很多的一个问题,有很多的网站为了反爬虫,除了需要高可用代理IP地址池外,还需要登录。例如知乎,很多信息都是需要登录以后才能爬取,但是频繁登录后就会出现验证码(有些网站直接就让你输入验证码),这
阅读全文
posted @ 2018-01-05 11:41 Charles.L
阅读(18200)
评论(4)
推荐(2)
编辑
公告