2018年10月23日
scrapy的介绍、组件、数据流
摘要： scrapy是一个为了爬取网站数据，提取结构性数据而编写的应用框架，我们只需要实现少量代码，就能够快速的抓取到数据内容。 scrapy使用了twisted异步网络框架来处理网络通讯，来加快我们的下载速度，不用自己去实现异步框架，并且包含了各种中间件接口，可以灵活的完成各种需求 scrapy的工作流程 阅读全文
posted @ 2018-10-23 23:29 黄溢 阅读(276) 评论(0) 推荐(0) 编辑