2018年2月23日

使用pyspider爬取巨量淘宝MM图片

摘要： 具体搭建步骤不再赘述，这里主要使用到了fakeagent，phantomjs和proxy pyspider的爬取相当智能，在不能获取图片的时候会适当的暂停一段时间再试探性的爬取，配合fakeagent，proxypool和phantomjs，爬取成功... 阅读全文

posted @ 2018-02-23 16:23 #大囚长# 阅读(166) 评论(0) 推荐(0) 编辑