摘要：
接上篇文章，在python3.6.4安装完成的基础上，安装相关依赖模块及pyspider。 依赖安装 1.setuptools和pip setuptools和pip是python的包管理工具，python3会默认安装，版本可能不是最新，需要手动升级一下。这2个模块在python3的安装日志结尾处有提 阅读全文
摘要：
爬虫是一个既好玩又好用的东西，接触它有1年多了，了解一些，算不上精通。爬过新闻、微信公众号，主要用pyspider，scrapy也了解过，python2和3都尝试过。公司业务规模不大，基于 python3.6的pyspider是我最终选择的方案。 环境准备：centos7 centos系统会自带py 阅读全文