2021年7月12日
flink数据广播场景总结
摘要： 数据集广播，主要分为广播变量，广播维表(数据集)两种，一种为变量，一种为常量(抽象的说法)； 一.数据广播背景 对于小变量，小数据集，需要和大数据集，大流进行联合计算的时候，往往把小数据集广播出去，整体直接和大数据集(流)的分布式最小粒度数据进行计算，最后把计算结果合并，这样效率更高，省去分布式节点 阅读全文
posted @ 2021-07-12 23:24 疯码牛Pro 阅读(1636) 评论(0) 推荐(0) 编辑