摘要: 1.名词定义 分类: 1)普通网络爬虫 一个或若干初始网页的URL开始,获得初始网页上的URL,在抓取网页的过程中,不断从当前页面上抽取新的URL放入队列,直到满足系统的一定停止条件 爬行策略:深度优先策略,广度优先策略 2)聚焦网络爬虫 需要根据一定的网页分析算法过滤与主题无关的链接,保留有用的链 阅读全文
posted @ 2018-07-07 18:49 王吉平 阅读(167) 评论(0) 推荐(0) 编辑