会员
周边
捐助
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
博客园
首页
新随笔
联系
订阅
管理
2017年4月22日
删除了原有的offset之后再次启动会报错park Streaming from Kafka has error numRecords must not ...
摘要: 笔者使用Spark streaming读取Kakfa中的数据,做进一步处理,用到了KafkaUtil的createDirectStream()方法;该方法不会自动保存topic partition的offset到zk,需要在代码中编写提交逻辑,此处介绍了保存offset的方法。 当删除已经使用过的k
阅读全文
posted @ 2017-04-22 17:24 niutao
阅读(661)
评论(0)
推荐(0)
编辑