摘要: 单线程运行速度相对较慢时,我们可以使用threading模块将其变为多线程并发以节约时间~ 阅读全文
posted @ 2017-08-17 14:35 李·狗嗨 阅读(212) 评论(0) 推荐(0) 编辑
摘要: Scrapy采集数据时为每个请求随机分配user-agent,故记录下常用的User-Agent-List ~ 阅读全文
posted @ 2017-08-17 13:55 李·狗嗨 阅读(288) 评论(0) 推荐(0) 编辑