2017年11月28日
【scrapy】流程大致分析
摘要： Scrapy流程分析 Scrapy 是一个重型爬虫框架。主要分为5部分:引擎(Engine)、调度器(Scheduler)(这个不太熟悉)、下载器(Downloader) 、爬虫(Spider)、管道（Item Pipeline）。 流程图如下: scrapy流程图(自己瞎画的) 流程概述: 参考: 阅读全文
posted @ 2017-11-28 14:20 Viv1 阅读(343) 评论(0) 推荐(0) 编辑