摘要: scrapy spider 爬虫,负责生成Request以及对爬取结果解析并生成对应的Item spider middleware 爬虫中间件,位于engine和spider之间,可以对响应和Item进行处理 engine 引擎,负责处理整个系统的数据流和事件 schelduler 调度器,负责维护 阅读全文
posted @ 2022-02-12 11:04 liDB 阅读(63) 评论(0) 推荐(0) 编辑