摘要: 第1章 Python爬虫的分类 1.1 通用爬虫: 通用爬虫是搜索引擎BaiDu Google YaHoo等,抓取的重要组成部分,主要目的是将互联网上的网页下载到本地,形成一个互联网内容的镜像备份。 1.2 聚焦爬虫 是根据指定的需求抓取网络上的数据 1.3 Robots.txt协议 自己的门户网站 阅读全文
posted @ 2019-03-22 11:29 地铁昌平线 阅读(252) 评论(0) 推荐(0) 编辑