flink流式数据常用API

一、转换操作

1.基本转换

#DataStream转换成DataStream
map()
filter()
flatMap()

2.键值对转换

#将DataStream转换成KeyedStream
keyBy()
#KeyedStream聚合函数
sum()
min()
max()
minBy()
maxBy()
reduce()

3.多流合并或单流拆分转换

#先进先出,不去重
union()
connect()
coMap()
coFlatMap()
#split是union的逆操作
split()
select()

4.分发转换

#随机数据交换
shuffle()
#轮流数据交换
rebalance()
#重调
rescale()
#广播
broadcast()
#全局
global()

二、设置并行度

setParallelism()

 

posted @   Mars.wang  阅读(123)  评论(0编辑  收藏  举报
编辑推荐:
· AI与.NET技术实操系列:基于图像分类模型对图像进行分类
· go语言实现终端里的倒计时
· 如何编写易于单元测试的代码
· 10年+ .NET Coder 心语,封装的思维:从隐藏、稳定开始理解其本质意义
· .NET Core 中如何实现缓存的预热?
阅读排行:
· 25岁的心里话
· 闲置电脑爆改个人服务器(超详细) #公网映射 #Vmware虚拟网络编辑器
· 基于 Docker 搭建 FRP 内网穿透开源项目(很简单哒)
· 零经验选手,Compose 一天开发一款小游戏!
· 通过 API 将Deepseek响应流式内容输出到前端
点击右上角即可分享
微信分享提示