摘要： 爬虫06 /scrapy框架 [TOC] 1. scrapy概述/安装 异步的爬虫框架 高性能的数据解析，持久化存储，全栈数据的爬取，中间件，分布式 Twisted：就是scrapy的异步机制，主要体现在下载器 框架：就是一个集成好了各种功能且具有很强通用性的一个项目模板。 环境安装： Linux： 阅读全文