2023年8月2日
scrapy源码分析：redis分布式爬虫队列中，priority值越大，优先级越高
摘要： scrapy源码分析：redis分布式爬虫队列中，priority值越大，优先级越高 一、背景 scrapy爬虫项目中，遇到scrapy的priority属性，搞不懂priority的值越大优先级越高，还是值越小优先级越高 # 通过priority修改优先级 return scrapy.Reques 阅读全文
posted @ 2023-08-02 12:44 安迪9468 阅读(160) 评论(0) 推荐(0) 编辑