会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
杨守鹤
难不成这是杨守鹤的博客?
首页
新随笔
订阅
管理
2019年1月24日
python爬虫第一天
摘要: 简介 1:组成:爬虫节点,控制节点和资源库。 控制节点,也叫中央控制器,主要负责根据url地址分配线程,并调用爬虫节点进行具体的爬行。 爬虫节点会按照具体的算法,对网页进行具体的爬行,主要包括下载网页以及对网页的文本进行处理,爬行后会将结果储存到对应资源库中。 2:类型:通用网络爬虫,聚焦网络爬虫,
阅读全文
posted @ 2019-01-24 11:04 杨守鹤
阅读(366)
评论(4)
推荐(1)
编辑
公告