摘要: # 数据的持久化操作redis >MongoDBimport redisfrom pymongo import MongoClientimport json# 爬虫实现简单分布式:多个url放到列表里,往里不停放URL,程序循环取值,# 可以把url放到redis中,多台机器从redis中取值,爬取 阅读全文
posted @ 2019-10-20 00:33 拷贝达人 阅读(2023) 评论(0) 推荐(0) 编辑