摘要: python爬虫 ## 1.Python爬虫架构 Python 爬虫架构主要由五个部分组成,分别是调度器、URL管理器、网页下载器、网页解析器、应用程序(爬取的有价值数据)。 **调度器:**相当于一台电脑的CPU,主要负责调度URL管理器、下载器、解析器之间的协调工作。 **URL管理器:**包括 阅读全文
posted @ 2022-03-07 10:33 小杨的冥想课 阅读(97) 评论(0) 推荐(0) 编辑