2019年8月15日
SparkStreaming之checkpoint检查点
摘要： 一.简介 流应用程序必须保证7*24全天候运行，因此必须能够适应与程序逻辑无关的故障【例如：系统故障、JVM崩溃等】。为了实现这一点，SparkStreaming需要将足够的信息保存到容错存储系统中，以便它可以从故障中恢复。 检查点有两种类型。 1.元数据检查点 将定义流式计算的信息保存到容错存储系 阅读全文
posted @ 2019-08-15 16:03 云山之巅 阅读(1149) 评论(0) 推荐(0) 编辑