摘要: 今天来总结一下Scrapy框架的用法。scrapy的架构如下: Engine :引擎,处理整个系统的数据流处理、触发事务,是整个框架的核心。 Items :项目,它定义了爬取结果的数据结构,爬取的数据会被赋值成该 Items 对象。 Scheduler :调度器,接受 Engine 发过来的请求,并 阅读全文
posted @ 2018-12-09 19:50 *精灵鼠* 阅读(267) 评论(0) 推荐(0) 编辑