2018年7月30日
SparkStreaming整合Kafka（Offset保存在Hbase上，Spark2.X + kafka0.10.X）
摘要： 继续SparkStreaming整合Kafka 其实将offset保存在zookeeper上不适用于高并发的情况的，于是乎，借鉴上次的代码。将offset保存在Hbasea上的方法也大概写了一下，暂时运行起来是没有问题的。 直接上代码（代码比较粗糙，但是思路应该还算清晰）： 相比较上次的坑倒是没有很 阅读全文
posted @ 2018-07-30 17:58 麻辣小虾 阅读(2071) 评论(2) 推荐(1) 编辑