摘要:
scrapy框架之持久化操作 基于终端指令的持久化存储 基于管道的持久化存储 1 基于终端指令的持久化存储 保证爬虫文件的parse方法中有可迭代类型对象(通常为列表or字典)的返回,该返回值可以通过终端指令的形式写入指定格式的文件中进行持久化操作。 以爬取糗事百科(https://www.qius 阅读全文
摘要:
1,下载Redis,这里打算使用3.0的版本 下载地址:http://redis.io/download 需要注意的是,windows版本的redis只支持64位操作系统,其他的就不要考虑了 2,将下载下来的压缩包解压,例如:将 Redis-x64-3.0.500.zip 解压到 D:\reids\ 阅读全文