2024年9月24日

通过yarn提供Spark任务,这个过程发生了什么?

摘要: 大数据集群中通过YARN提交任务的流程及YARN协作机制 1. 任务提交阶段: 客户端向ResourceManager提交应用程序,包括应用程序代码、所需资源(内存、CPU等)和启动命令等信息。 ResourceManager接收应用程序的提交请求,并根据集群资源情况进行调度。 ResourceMa 阅读全文

posted @ 2024-09-24 15:33 滚动的蛋 阅读(30) 评论(0) 推荐(0) 编辑

导航

< 2025年3月 >
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5
点击右上角即可分享
微信分享提示