2016年11月14日
scrapy 为每个pipeline配置spider
摘要： 在settings.py里面配置pipeline，这里的配置的pipeline会作用于所有的spider，我们可以为每一个spider配置不同的pipeline， 设置 Spider 的 custom_settings对象属性 class UserInfoSpider(CrawlSpider): # 阅读全文
posted @ 2016-11-14 15:22 kakaok 阅读(2689) 评论(4) 推荐(0) 编辑