2021年1月26日
scrapy 运行逻辑
摘要： 爬虫的步骤：发送请求获得响应→解析并提取数据→保存数据 我们沿用这个朴素的逻辑去理解scrapy 一、发送请求获得响应 1、爬虫发送请求request到引擎 2、引擎将请求request传递给调度器scheduler队列 3、调度器scheduler从请求队列中向引擎输送request 4、引擎将r 阅读全文
posted @ 2021-01-26 18:57 止一 阅读(216) 评论(0) 推荐(0) 编辑