摘要: 对于流式应用程序,保证应用7*24小时的稳定运行,是非常必要的。因此对于计算引擎,要求必须能够适应与应用程序逻辑本身无关的问题(比如driver应用失败重启、网络问题、服务器问题、JVM崩溃等),具有自动容错恢复的功能。 阅读全文
posted @ 2020-11-23 15:47 大数据学习与分享 阅读(255) 评论(0) 推荐(0) 编辑
摘要: Spark闭包 | driver & executor程序代码执行 ==> 编写的Spark程序代码,运行在driver端还是executor端呢? 阅读全文
posted @ 2020-11-23 09:15 大数据学习与分享 阅读(1449) 评论(0) 推荐(2) 编辑