会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
大数据学习与分享
博客园
首页
新随笔
联系
订阅
管理
2020年11月23日
如何获取流式应用程序中checkpoint的最新offset
摘要: 对于流式应用程序,保证应用7*24小时的稳定运行,是非常必要的。因此对于计算引擎,要求必须能够适应与应用程序逻辑本身无关的问题(比如driver应用失败重启、网络问题、服务器问题、JVM崩溃等),具有自动容错恢复的功能。
阅读全文
posted @ 2020-11-23 15:47 大数据学习与分享
阅读(255)
评论(0)
推荐(0)
编辑
Spark闭包 | driver & executor程序代码执行
摘要: Spark闭包 | driver & executor程序代码执行 ==> 编写的Spark程序代码,运行在driver端还是executor端呢?
阅读全文
posted @ 2020-11-23 09:15 大数据学习与分享
阅读(1449)
评论(0)
推荐(2)
编辑
公告