2015年11月16日
(8)分布式下的爬虫Scrapy应该如何做-图片下载(源码放送)
摘要： 转载主注明出处：http://www.cnblogs.com/codefish/p/4968260.html 在爬虫中，我们遇到比较多需求就是文件下载以及图片下载，在其它的语言或者框架中，我们可能在经过数据筛选，然后异步的使用文件下载类来达到目的，Scrapy框架中本身已经实现了文件及图片下载的文... 阅读全文
posted @ 2015-11-16 11:00 爱吃猫的鱼 阅读(2154) 评论(2) 推荐(4) 编辑