摘要: 大家可能都会爬虫,可能都有各自的爬虫工具,但是我觉得如果要靠爬虫吃饭,python的scrapy这个框架还是需要学习一下的,这两天看了一下这个文档,发现效率还是不错的,分布式爬虫,代码量还很少的,效率还是很高的。 开发平台:centos 7 python版本:python3.6 第一步:要使用这个第 阅读全文
posted @ 2018-11-13 17:17 WangHello 阅读(295) 评论(0) 推荐(0) 编辑