摘要: Scrapy 爬虫框架 Scrapy 是一个用 Python 写的 Crawler Framework 。它使用 Twisted 这个异步网络库来处理网络通信。 Scrapy 框架的主要架构 根据它官网上的设计架构图,一个完整的 Spider 主要分成 7 个部分:Scrapy Engine,Sch 阅读全文
posted @ 2021-05-30 17:01 Herman·H 阅读(112) 评论(0) 推荐(0) 编辑