002.flink打jar包时只打包代码,依赖jar包批量指定
执行脚本完整版
[centos@s101 /home/centos]$flink run -m yarn-cluster -yt /home/centos/hadoop_dependent_jar -yjm 1024 -ytm 1536 -yn 2 -ys 3 -yqu root.centos -ynm haFwordCount \
$(ll /home/centos/hadoop_dependent_jar/ |awk 'NR>1{print "-C file:///home/centos/hadoop_dependent_jar/"$9}' |tr '\n' ' ' ) \
/..../xxxx.jar --hostname s101 --port 6666
输出此目录下所有的jar包的路径 可把依赖的jar放进这目录,统一指定而不需要每个都列出来
idea 配置文件 scope配置只打包代码
-yjm jobManger的内存
-ytm taskManager的内存
-yn tm的数量
-ys 每个tm的任务槽
-yqu yarn资源队列名称
-ynm yarn application name
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· Linux系列:如何用heaptrack跟踪.NET程序的非托管内存泄露
· 开发者必知的日志记录最佳实践
· SQL Server 2025 AI相关能力初探
· Linux系列:如何用 C#调用 C方法造成内存泄露
· AI与.NET技术实操系列(二):开始使用ML.NET
· 无需6万激活码!GitHub神秘组织3小时极速复刻Manus,手把手教你使用OpenManus搭建本
· C#/.NET/.NET Core优秀项目和框架2025年2月简报
· 一文读懂知识蒸馏
· Manus爆火,是硬核还是营销?
· 终于写完轮子一部分:tcp代理 了,记录一下
2020-08-17 003.mysql-数据库备份和数据库迁移mysqldump