摘要: 什么是爬虫? 通过编写程序模拟浏览器让其去互联网上获取数据 爬虫的分类: 1. 通用爬虫:爬取的是一整张网页源码数据 2.聚集爬虫:爬取网页中局部的内容,聚集是建立在通用爬虫之上 3.增量式爬虫:用来检测网站数据更新情况,从而爬取到网站找中最新出来的数据。 反爬机制:对应的载体是门户网站,网站中可以 阅读全文
posted @ 2019-09-23 18:10 ivy_wang 阅读(187) 评论(0) 推荐(0) 编辑