2016年7月17日
摘要: 最近在用scrapy重写以前的爬虫,由于豆瓣的某些信息要登录后才有权限查看,故要实现登录功能。豆瓣登录偶尔需要输入验证码,这个在以前写的爬虫里解决了验证码的问题,所以只要搞清楚scrapy怎么提交表单什么的就OK了。从网上找了点资料,说要重写CrawlSpider的start_requests,在重 阅读全文
posted @ 2016-07-17 11:26 seven_clear 阅读(15834) 评论(1) 推荐(1) 编辑