摘要: Scrapy框架 Scrapy是一个高级的爬虫框架,它不仅包括了爬虫的特征,还可以方便地将爬虫数据保存到CSV、Json等文件中。 Scrapy用途广泛,可以用于数据挖掘、监测和自动化测试。 Scrapy 使用了 Twisted异步网络库来处理网络通讯。 整体架构大致如下: Scrapy是一个高级的 阅读全文
posted @ 2018-06-21 12:25 ls秦 阅读(281) 评论(0) 推荐(0) 编辑