摘要: 前言 通过spark获取hbase数据的过程中,遇到了InputFormat。文章主要围绕InputFormat介绍。会牵扯到spark,mapreduce,hbase相关内容 InputFormat InputFormat是mapreduce提供的数据源格式接口,也就是说,通过该接口可以支持读取各 阅读全文
posted @ 2017-09-28 17:34 ulysses_you 阅读(2974) 评论(0) 推荐(1) 编辑
摘要: 前言 文章不含源码,只是一些官方资料的整理和个人理解 架构总览 这张图在大街小巷里都能看到,感觉是hbase架构中最详细最清晰的一张,稍微再补充几点。 1) Hlog是低版本hbase术语,现在称为WALs。 2) 1个region包含了多个store,1个store包含了1个colum famil 阅读全文
posted @ 2017-09-28 10:53 ulysses_you 阅读(853) 评论(0) 推荐(0) 编辑