摘要： Scrapy框架图： scrapy-engine：引擎，负责itemPipeline+Spiders+Scheduler+Downloader间的通讯和数据传递 scheduler：调度器，负责接收引擎发送过来的Requests请求，并将请求按一定方式排列入队，之后等待引擎来请求时交给引擎 down 阅读全文