会员
周边
捐助
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
止一
博客园
首页
新随笔
管理
2021年1月26日
scrapy 运行逻辑
摘要: 爬虫的步骤:发送请求获得响应→解析并提取数据→保存数据 我们沿用这个朴素的逻辑去理解scrapy 一、发送请求获得响应 1、爬虫发送请求request到引擎 2、引擎将请求request传递给调度器scheduler队列 3、调度器scheduler从请求队列中向引擎输送request 4、引擎将r
阅读全文
posted @ 2021-01-26 18:57 止一
阅读(216)
评论(0)
推荐(0)
编辑