002.flink打jar包时只打包代码,依赖jar包批量指定

执行脚本完整版

[centos@s101 /home/centos]$flink run -m yarn-cluster -yt /home/centos/hadoop_dependent_jar -yjm 1024 -ytm 1536 -yn 2 -ys 3 -yqu root.centos -ynm haFwordCount  \

$(ll /home/centos/hadoop_dependent_jar/  |awk 'NR>1{print  "-C file:///home/centos/hadoop_dependent_jar/"$9}' |tr  '\n'  '  '  )  \

/..../xxxx.jar   --hostname  s101  --port  6666

 

输出此目录下所有的jar包的路径  可把依赖的jar放进这目录,统一指定而不需要每个都列出来

 

 

idea 配置文件  scope配置只打包代码

 

 

-yjm  jobManger的内存

-ytm  taskManager的内存

-yn   tm的数量

-ys   每个tm的任务槽

-yqu yarn资源队列名称

-ynm yarn application name

 

posted @   star521  阅读(1126)  评论(0编辑  收藏  举报
编辑推荐:
· Linux系列:如何用heaptrack跟踪.NET程序的非托管内存泄露
· 开发者必知的日志记录最佳实践
· SQL Server 2025 AI相关能力初探
· Linux系列:如何用 C#调用 C方法造成内存泄露
· AI与.NET技术实操系列(二):开始使用ML.NET
阅读排行:
· 无需6万激活码!GitHub神秘组织3小时极速复刻Manus,手把手教你使用OpenManus搭建本
· C#/.NET/.NET Core优秀项目和框架2025年2月简报
· 一文读懂知识蒸馏
· Manus爆火,是硬核还是营销?
· 终于写完轮子一部分:tcp代理 了,记录一下
历史上的今天:
2020-08-17 003.mysql-数据库备份和数据库迁移mysqldump
点击右上角即可分享
微信分享提示