scrapy pipelines导出各种格式
摘要:
scrapy在使用pipelines的时候,我们经常导出csv,json.jsonlines等等格式。每次都需要写一个类去导出,很麻烦。 这里我整理一个pipeline文件,支持多种格式的。 上面的定义好之后。我们就可以在settings.py里面设置导出指定的类了。 是不是很强大。如果你感兴趣,可 阅读全文
posted @ 2017-08-22 17:55 LinuxPanda 阅读(1836) 评论(0) 推荐(1) 编辑