摘要: 爬虫在应用场景中的分类 (1)通用爬虫:抓取系统重要组成部分,抓取的是一整张页面数据。 (2)聚焦爬虫:建立在通用爬虫的基础上,抓取的是页面中的特定内容。 (3)增量式爬虫:检测网站中的更新情况,只会抓取网站中最近更新的内容。 反爬机制 门户网站可以制定相应的策略或者技术手段,防止爬虫程序进行网站数 阅读全文
posted @ 2022-01-14 21:43 Sunshine_y 阅读(42) 评论(0) 推荐(0) 编辑