基于sanic和爬虫创建的代理ip池
摘要:
搭建免费的代理ip池 需要解决的问题: 使用什么方式存储ip 文件存储 缺点: 打开文件修改文件操作较麻烦 mysql 缺点: 查询速度较慢 mongodb 缺点: 查询速度较慢. 没有查重功能 redis --> 使用redis存储最为合适 所以 -> 数据结构采用redis中的zset有序集合 阅读全文
posted @ 2022-07-05 21:55 huxiaofeng 阅读(217) 评论(0) 推荐(0) 编辑