会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
moonsoft
技术交流QQ群:583895157
博客园
首页
新随笔
联系
订阅
管理
2018年7月19日
爬虫技术框架——Heritrix
摘要: Heritrix是一个由Java开发的开源Web爬虫系统,用来获取完整的、精确的站点内容的深度复制, 具有强大的可扩展性,运行开发者任意选择或扩展各个组件,实现特定的抓取逻辑。 一、Heritrix介绍 Heritrix采用了模块化的设计,用户可以在运行时选择要用的模块。它由核心类(core cla
阅读全文
posted @ 2018-07-19 18:30 moonsoft
阅读(5419)
评论(0)
推荐(0)
编辑
公告