Flink - [02] 安装部署(Standalone)
一、准备
1、角色规划
节点名称 | node01 | node02 | node03 |
master | ○ | ||
worker | ○ | ○ | |
zookeeper | ○ | ○ | ○ |
二、部署
1、在node01上解压:tar -zxvf flink-1.11.2-bin-scala_2.11.tgz
2、修改 conf/flink-conf.yaml 文件
jobmanager.rpc.address: node01
3、修改 conf/slave 文件
node02
node03
4、将flink目录分发给node02、node03
5、启动:./start-cluster.sh
6、访问 http://node01:8081 可以对flink集群和任务进行监控管理
7、准备数据文件 input.txt
how are you
fine thank you
and you
i am fine too thank you
8、把含数据文件的文件夹,分发到TaskManager服务器中
由于读取数据是从本地磁盘读取,实际任务会被分发到TaskManager的机器中,所以要把目标文件分发。
9、执行程序
[root@node01 bin]# ./flink run -c com.atguigu.flink.app.BatchWcApp /ext/flink0503-1.0-SNAPSHOT.jar \
--input /applog/flink/input.txt \
--output /applog/flink/output.csv
— 要养成终生学习的习惯 —
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 阿里最新开源QwQ-32B,效果媲美deepseek-r1满血版,部署成本又又又降低了!
· SQL Server 2025 AI相关能力初探
· AI编程工具终极对决:字节Trae VS Cursor,谁才是开发者新宠?
· 开源Multi-agent AI智能体框架aevatar.ai,欢迎大家贡献代码
· Manus重磅发布:全球首款通用AI代理技术深度解析与实战指南