2016年6月1日
spark批量写写数据到Hbase中（bulkload方式）
摘要： 1：为什么大批量数据集写入Hbase中，需要使用bulkload BulkLoad不会写WAL，也不会产生flush以及split。 如果我们大量调用PUT接口插入数据，可能会导致大量的GC操作。除了影响性能之外，严重时甚至可能会对HBase节点的稳定性造成影响。但是采用BulkLoad就不会有这个 阅读全文
posted @ 2016-06-01 17:42 niutao 阅读(957) 评论(0) 推荐(0) 编辑