会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
bener
尘世间迷途小码农
博客园
首页
新随笔
联系
订阅
管理
2019年4月3日
spark streaming中维护kafka偏移量到外部介质
摘要: spark streaming中维护kafka偏移量到外部介质 以kafka偏移量维护到redis为例。 redis存储格式 使用的数据结构为 ,其中key为 ,value为 。 例如 这个 下有3个分区,则key value结构如下: 的偏移量为x 的偏移量为y 的偏移量为z 消费时指定offse
阅读全文
posted @ 2019-04-03 19:48 bener
阅读(1636)
评论(0)
推荐(0)
编辑
公告