大数据-------Job 提交流程

1. 建立连接 : 判断是在本地运行还在集群中运行,会分别创建不同的运行对象Local和Yarn;

2. 提交 Job  :

校验空间:checkSpace() -------》缓存处理 -------》创建资源路径:Stag 路径 ------》

获取JobId,在Stag下创建Job路径 -------》拷贝相关资源到集群 -------》计算切片,生成切片规划文件

-------》向Stag路径写XML配置文件 -------》提交Job,等待返回提交状态

posted @ 2019-08-30 09:11  我是一名搬运工  阅读(205)  评论(0编辑  收藏  举报