2023年5月11日

Kafka学习总结

摘要: 一、为什么要使用Kafka 如果直接使用flink进行元数据接收、数据处理、元数据及处理后数据存储的整个过程,压力较大,且耦合性较高,故障修复需要将整个过程一起修复,故为了降低flink计算压力,降低元数据与计算过程之间的耦合度,考虑使用kafka组件与flink结合使用。 未经过ETL的数据大多较 阅读全文

posted @ 2023-05-11 15:32 saihao 阅读(46) 评论(0) 推荐(0) 编辑

Flink ML学习笔记

摘要: 概念 Flink ML是一个机器学习算法库。用户可以使用标准机器学习API或者自定义机器学习算法来进行离线或在线的模型训练和预测服务。 一、环境准备 安装1.15及以上版本的flink到本地环境 导入flink table api相关依赖 二、开发中的基本概念 1、Table API Flink M 阅读全文

posted @ 2023-05-11 10:27 saihao 阅读(758) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示