2024年9月24日

通过yarn提供Spark任务,这个过程发生了什么?

摘要: 大数据集群中通过YARN提交任务的流程及YARN协作机制 1. 任务提交阶段: 客户端向ResourceManager提交应用程序,包括应用程序代码、所需资源(内存、CPU等)和启动命令等信息。 ResourceManager接收应用程序的提交请求,并根据集群资源情况进行调度。 ResourceMa 阅读全文

posted @ 2024-09-24 15:33 滚动的蛋 阅读(20) 评论(0) 推荐(0) 编辑

导航