2020年5月9日
scrapy中主动触发关闭爬虫的方法
摘要： 在spider中 主动关闭爬虫: self.crawler.engine.close_spider(self, 'cookie失效关闭爬虫') 在pipeline 和downloadermiddlewares 主动关闭爬虫： spider.crawler.engine.close_spider(sp 阅读全文
posted @ 2020-05-09 09:20 BruceLong 阅读(724) 评论(0) 推荐(0) 编辑