摘要: Spark Streaming允许DStream的数据被输出到外部系统,如数据库或文件系统。由于输出操作实际上使transformation操作后的数据可以通过外部系统被使用,同时输出操作触发所有DStream的transformation操作的实际执行(类似于RDD操作)。以下表列出了目前主要的输 阅读全文
posted @ 2022-03-08 17:04 青竹之下 阅读(430) 评论(0) 推荐(0) 编辑
摘要: 与RDD类似,DStream也提供了自己的一系列操作方法,这些操作可以分成三类:普通的转换操作、窗口转换操作和输出操作。 3.3.1 普通的转换操作 普通的转换操作如下表所示: transform(func)操作 该transform操作(转换操作)连同其其类似的 transformWith操作允许 阅读全文
posted @ 2022-03-08 17:00 青竹之下 阅读(505) 评论(0) 推荐(0) 编辑