摘要: 爬虫学习阶段性总结 爬虫的基础知识我打算就先学到这里了,以后需要用起来的时候再去看看相关文档和谷歌,做一个小量级的爬虫程序问题不大,对于分布式的和增量更新去重等需求就直接上框架,用别人的轮子还是蛮爽的。 简单小量级:requests+pyquery JS渲染太多的:selenium+Phantomj 阅读全文
posted @ 2017-12-11 11:16 copywang 阅读(820) 评论(0) 推荐(0) 编辑