2019年11月23日
网络爬虫（13）-Scrapy持久化存储
摘要： 1.基于终端指令的持久化存储 保证爬虫文件的parse方法中有可迭代类型对象（通常为列表or字典）的返回，该返回值可以通过终端指令的形式写入指定格式的文件中进行持久化操作。 执行输出指定格式进行存储：将爬取到的数据写入不同格式的文件中进行存储 scrapy crawl 爬虫名称 -o xxx.jso 阅读全文
posted @ 2019-11-23 13:50 麦小秋 阅读(170) 评论(0) 推荐(0) 编辑