摘要: StructuredStreaming简单的例子(NewAPI)(wordCount) 阅读全文
posted @ 2019-08-22 16:21 DiYong 阅读(566) 评论(0) 推荐(0) 编辑
摘要: 使用流式DataSets和流式DataFrames的API 流式DataFrames/Datasets的结构类型推断与划分 阅读全文
posted @ 2019-08-22 14:47 DiYong 阅读(330) 评论(0) 推荐(0) 编辑
摘要: ◆ 基本概念 ◆ 处理Event-time和Late Data ◆ 容错语义 阅读全文
posted @ 2019-08-22 12:24 DiYong 阅读(215) 评论(0) 推荐(0) 编辑
摘要: SparkStreaming简单例子 ◆ 构建第一个Streaming程序: (wordCount) ◆ Spark Streaming 程序最好以使用Maven或者sbt编译出来的独立应用的形式运行。 ◆ 准备工作: 1.引入Spark Streaming的jar 2.scala流计算import 阅读全文
posted @ 2019-08-22 00:17 DiYong 阅读(353) 评论(0) 推荐(0) 编辑