Flink - [02] 安装部署(Standalone)

 

一、准备

1、角色规划

Flink Standalone 角色规划
节点名称 node01 node02 node03
master    
worker  
zookeeper

 

 

 

二、部署

1、在node01上解压:tar -zxvf flink-1.11.2-bin-scala_2.11.tgz

2、修改 conf/flink-conf.yaml 文件

jobmanager.rpc.address: node01

3、修改 conf/slave 文件

node02
node03

4、将flink目录分发给node02、node03

5、启动:./start-cluster.sh

6、访问 http://node01:8081 可以对flink集群和任务进行监控管理

7、准备数据文件 input.txt

how are you
fine thank you
and you
i am fine too thank you

8、把含数据文件的文件夹,分发到TaskManager服务器中

由于读取数据是从本地磁盘读取,实际任务会被分发到TaskManager的机器中,所以要把目标文件分发。

9、执行程序

[root@node01 bin]# ./flink run -c com.atguigu.flink.app.BatchWcApp /ext/flink0503-1.0-SNAPSHOT.jar \
--input /applog/flink/input.txt \
--output /applog/flink/output.csv

 

 

 

 

— 要养成终生学习的习惯 —

posted @   HOUHUILIN  阅读(35)  评论(0编辑  收藏  举报
相关博文:
阅读排行:
· 阿里最新开源QwQ-32B,效果媲美deepseek-r1满血版,部署成本又又又降低了!
· SQL Server 2025 AI相关能力初探
· AI编程工具终极对决:字节Trae VS Cursor,谁才是开发者新宠?
· 开源Multi-agent AI智能体框架aevatar.ai,欢迎大家贡献代码
· Manus重磅发布:全球首款通用AI代理技术深度解析与实战指南
点击右上角即可分享
微信分享提示