会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
乔儿
博客园
首页
新随笔
联系
订阅
管理
2019年5月24日
scrapy主动触发关闭爬虫
摘要: 可以在直接spider、pipeline和downloaderMiddlewares中关闭爬虫 在spider中时在方法里直接写 在pipeline和downloaderMiddlewares里 虽然这一行代码会停止爬虫,但是这一行代码的停止并不是立即停止 原因是因为当我们不更改爬虫的setting
阅读全文
posted @ 2019-05-24 16:54 乔儿
阅读(824)
评论(0)
推荐(0)
编辑
公告