Flink遇到的问题及解决方案

1. flink部署到集群上,standalone模式,需要指定TaskManager主机的地址:修改flink-conf.yaml配置并添加配置 taskmanager.host: localhost
否则提交job时,会报错:TaskExecutor akka.tcp://xxx has no more allocated slots for job 

参考:单机Flink TaskExecutor no more allocated slots 问题解决 - 简书 (jianshu.com)


2. 当job依赖于其它的jar包,比如kafka连接器、jdbc连接器,需要用maven将依赖的jar包也打入包中


3. 如果不好打入jar包中,并且使用频率较高,可以将jar包放置在flink/lib目录下,然后重启集群

 

4. 写入greenplum数据会翻倍,不知道为什么 

因为起了两个flink服务。。关掉一个就好了

posted @   Fabulous~  阅读(1587)  评论(0编辑  收藏  举报
相关博文:
阅读排行:
· DeepSeek 开源周回顾「GitHub 热点速览」
· 物流快递公司核心技术能力-地址解析分单基础技术分享
· .NET 10首个预览版发布:重大改进与新特性概览!
· AI与.NET技术实操系列(二):开始使用ML.NET
· .NET10 - 预览版1新功能体验(一)
点击右上角即可分享
微信分享提示