scrapy中主动触发关闭爬虫的方法

在spider中 主动关闭爬虫:

self.crawler.engine.close_spider(self, “cookie失效关闭爬虫”)

在pipeline 和downloadermiddlewares 主动关闭爬虫：

spider.crawler.engine.close_spider(spider, “全文结束关闭爬虫”)