2020年6月15日
scrapy.Request.meta传递参数出现重复问题的解决方案
摘要： 一旦Spider的爬取的深度比较深时，数据的提取基本上是贯穿每一层的，为了将数据一层一层传递下去，我们需要将上一层提取的数据传递到下一层，供下一层使用，这时我们就需要使用的scrapy.Request的meta参数，其是一个字典。在传递不变数据时，不需要担心，但是我们传递的是一个Item类型或字典， 阅读全文
posted @ 2020-06-15 23:07 找回失去的自我 阅读(809) 评论(1) 推荐(0) 编辑