2022年8月16日
scrapy多级请求中priority设置
摘要： 基于优先获取item的想法,最下级请求最优先 请求优先级是基于scrapy有很多请求要发起的情况 priority越大请求越优先 不在设置中修改配置 scrapy代码太复杂,这是目前可以接受的解决办法 class xxxspiderSpider(scrapy.Spider): # 三级请求优先级逐级 阅读全文
posted @ 2022-08-16 15:24 meizhengchao 阅读(249) 评论(0) 推荐(0) 编辑