摘要： # python大数据开发 ## scrapy框架 ### 架构 - Scrapy Engine(引: 负责Spider、ltemPipeline、 Downloader、Scheduler中间的通讯，信号、数据传递等 - Scheduler(调度器):它负责接受引擎发送过来的Request请求，并 阅读全文