2019年9月2日
scrapy-redis源码浅析
摘要： "原文链接" 前言 分析这个项目的源码原因是需要有 去重过滤，增量爬取 两个功能，而 项目已经帮我们实现了，想看看他是怎么实现的。这里只贴出部分主要代码，查看时请打开源码对照，笔记有点长，建议看的童鞋按部分看。这是第一次分析源码，限于个人水平，如有错误恳请指正，谢谢！ 地址：https://gith 阅读全文
posted @ 2019-09-02 11:59 吴悟无 阅读(389) 评论(0) 推荐(0) 编辑