scrapy执行流程

1. def _next_request_from_scheduler(self, spider): fetch一个request，调用http11 handler，client的agent，返回的是deffered。
2. _handle_downloader_output(）if isinstance(response, Request):如果是请求，继续爬行，调用crawl时会把请求放到调度器
               self.crawl(response, spider)
3. def enqueue_scrape( 请求入队
4. def _scrape_next(self, spider, slot):
5. _scrape2
6. call_spider
7. handle_spider_output
8. _process_spidermw_output