会员
周边
众包
新闻
博问
闪存
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
清梦韶华
牛牛的博客
博客园
首页
新随笔
联系
订阅
管理
2022年11月17日
爬虫2.0
摘要: 一、什么是爬虫 爬虫:一段自动抓取互联网信息的程序,从互联网上抓取对于我们有价值的信息。 二、Python爬虫架构 Python 爬虫架构主要由五个部分组成,分别是调度器、URL管理器、网页下载器、网页解析器、应用程序(爬取的有价值数据)。 调度器:相当于一台电脑的CPU,主要负责调度URL管理器、
阅读全文
posted @ 2022-11-17 21:29 清梦韶华
阅读(13)
评论(0)
推荐(0)
编辑
公告