Flink - [02] 安装部署(Standalone)

 

一、准备

1、角色规划

Flink Standalone 角色规划
节点名称 node01 node02 node03
master    
worker  
zookeeper

 

 

 

二、部署

1、在node01上解压:tar -zxvf flink-1.11.2-bin-scala_2.11.tgz

2、修改 conf/flink-conf.yaml 文件

jobmanager.rpc.address: node01

3、修改 conf/slave 文件

node02
node03

4、将flink目录分发给node02、node03

5、启动:./start-cluster.sh

6、访问 http://node01:8081 可以对flink集群和任务进行监控管理

7、准备数据文件 input.txt

how are you
fine thank you
and you
i am fine too thank you

8、把含数据文件的文件夹,分发到TaskManager服务器中

由于读取数据是从本地磁盘读取,实际任务会被分发到TaskManager的机器中,所以要把目标文件分发。

9、执行程序

[root@node01 bin]# ./flink run -c com.atguigu.flink.app.BatchWcApp /ext/flink0503-1.0-SNAPSHOT.jar \
--input /applog/flink/input.txt \
--output /applog/flink/output.csv

 

 

 

 

— 要养成终生学习的习惯 —

posted @ 2024-03-27 12:08  HOUHUILIN  阅读(6)  评论(0编辑  收藏  举报