摘要: YARN上部署的过程: 客户端把 Flink 应用提交给 Yarn 的 ResourceManager,Yarn 的 ResourceManager 会向 Yarn 的 NodeManager 申请容器。在这些容器上,Flink 会部署 JobManager 和 TaskManager 的实例,从而 阅读全文
posted @ 2024-01-17 20:58 SpringCore 阅读(113) 评论(0) 推荐(0) 编辑
摘要: 本文基于:Flink Java Demo 1.下载 https://dlcdn.apache.org/flink/flink-1.18.0/flink-1.18.0-bin-scala_2.12.tgz 2.解压 mkdir /usr/flink tar -zxvf /home/flink-1.18 阅读全文
posted @ 2024-01-17 19:25 SpringCore 阅读(231) 评论(0) 推荐(0) 编辑
摘要: 1.新建Maven项目 <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-inst 阅读全文
posted @ 2024-01-17 19:09 SpringCore 阅读(193) 评论(0) 推荐(0) 编辑
摘要: 本文基于Flink Java Demo 1.WebUI作业提交 2.命令行提交 1.将Maven打包后的jar包上传到集群节点[略] 2.提交作业 /usr/flink/flink-1.18.0/bin/flink run -m 192.168.58.130:8081 -c cn.coreqi.Wo 阅读全文
posted @ 2024-01-17 18:19 SpringCore 阅读(138) 评论(0) 推荐(0) 编辑
摘要: Flink 在Standalone集群模式下不支持单作业模式部署,单作业模式需要借助资源管理平台。 1.Flink角色 Client:用于提交任务的客户端 JobManager:调度、分发任务的管理器 TaskManager:执行任务 2.集群规划 节点服务器 Hadoop02(192.168.58 阅读全文
posted @ 2024-01-17 11:57 SpringCore 阅读(491) 评论(0) 推荐(0) 编辑