2019年12月30日
爬虫基本原理
摘要： 一、爬虫基础简介必备知识 三种爬虫方式 ​ 通用爬虫： 抓取系统重要组成部分，获取的是整张页面数据 ​ 聚焦爬虫： 建立在通用爬虫之上，抓取页面指定的局部内容 ​ 增量式爬虫： 检测网站数据更新的情况，只抓取更新出来的数据 robots.txt协议： 君子协议，规定网站哪些数据可不可爬 http协议 阅读全文
posted @ 2019-12-30 20:56 tomjoy 阅读(233) 评论(0) 推荐(0) 编辑