sunny123456

  博客园 :: 首页 :: 博问 :: 闪存 :: 新随笔 :: 联系 :: 订阅 订阅 :: 管理 ::
  1796 随笔 :: 22 文章 :: 24 评论 :: 226万 阅读
< 2025年3月 >
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5

flink dtach 提交模式
在Flink中,dtach是一个用于启动Flink作业的工具,它允许用户在后台运行Flink作业,并且在用户登出会话后,作业将继续运行。

Flink支持两种提交作业的方式:通过CLI(命令行接口)和通过编程接口。

通过CLI提交作业:

在命令行中,你可以使用flink run命令来提交作业。如果你想要在dtach模式下运行作业,你可以添加--detached参数。

例如:

./bin/flink run -d -c com.my.program.Main /path/to/user/jar/my-program.jar
在这个例子中,-d参数表示以dtach模式运行作业,-c参数后面是主类的全名,最后面是jar文件的路径。

通过编程接口提交作业:

你也可以通过编程接口来提交作业,并设置作业的运行模式为dtach模式。

例如,在Java中:

PackagedProgram program = new PackagedProgram(file, args);
Configuration config = new Configuration();
config.setBoolean(ConfigConstants.JOB_MANAGER_WEB_SUBMIT_ENABLED, true);
config.setString(PipelineOptionsInternal.IS_EXECUTION_DETACHED, "true");

PipelineExecutor executor = PipelineExecutorFactory.createExecutor(config);
executor.execute(program);
在这个例子中,我们创建了一个PackagedProgram对象,并设置了Flink的配置,在这个配置中,我们将IS_EXECUTION_DETACHED设置为true,表示我们希望以dtach模式运行作业。

注意:以dtach模式运行作业,你需要在你的系统上安装并配置好dtach工具。如果你的系统上没有dtach,你可以通过以下命令来安装:

sudo apt-get install dtach
以上就是Flink作业提交的两种方式,在这两种方式中,我们都可以选择以dtach模式来运行作业,从而在用户登出会话后,作业可以继续运行。

posted on   sunny123456  阅读(117)  评论(0编辑  收藏  举报
相关博文:
阅读排行:
· DeepSeek 开源周回顾「GitHub 热点速览」
· 物流快递公司核心技术能力-地址解析分单基础技术分享
· .NET 10首个预览版发布:重大改进与新特性概览!
· AI与.NET技术实操系列(二):开始使用ML.NET
· .NET10 - 预览版1新功能体验(一)
历史上的今天:
2022-03-27 maven—jar包适用范围
2022-03-27 maven(一) maven到底是个啥玩意~
2022-03-27 Spring由于web配置导致的spring配置文件找不到的问题的解决方案 在把某项技术整合到Spring中的时候,我们时常会发现报如下错误
2022-03-27 成功搭建FTP站点并实现上传与下载
2022-03-27 干掉 XML Mapper,新出的 Fluent Mybatis 真香!
2022-03-27 不懂精简指令集还敢说自己是程序员?
2022-03-27 Java 程序员常犯的 10 个 SQL 错误!
点击右上角即可分享
微信分享提示