摘要: 这个爬虫集训课第三章的作业讲得是Scrapy 课程主要是使用Scrapy + Redis实现分布式爬虫 惯例贴一下作业: Python爬虫可以使用Requests库来进行简单爬虫的编写,但是Requests的性能很差,一个请求耗时在2秒左右,毫无性能。 当然也可以使用gevent和asyncio来实 阅读全文
posted @ 2018-07-12 21:49 桑卡 阅读(166) 评论(0) 推荐(0) 编辑
摘要: 本次爬虫集训的第二次作业是web微信。 先贴一下任务: 作业中使用到了Flask。 Flask是一个使用 Python 编写的轻量级 Web 应用框架。其 WSGI 工具箱采用 Werkzeug ,模板引擎则使用 Jinja2 。Flask使用 BSD 授权。 Flask也被称为 “microfra 阅读全文
posted @ 2018-07-12 21:23 桑卡 阅读(151) 评论(0) 推荐(0) 编辑