2019年1月11日
爬虫之scrapy工作流程
摘要： Scrapy是什么？ scrapy 是一个为了爬取网站数据，提取结构性数据而编写的应用框架，我们只需要实现少量代码，就能够快速的抓取到数据内容。Scrapy 使用了 Twisted['twɪstɪd](其主要对手是Tornado)异步网络框架来处理网络通讯，可以加快我们的下载速度，不用自己去实现异步 阅读全文
posted @ 2019-01-11 11:50 斯外戈 阅读(628) 评论(0) 推荐(0) 编辑