Yarn和Spark对比

 

 

 

Yarn Spark  
ResourceManager(RM 资源管理器) Mater  管理子节点，资源调度，接受任务请求
NodeManager (NM 节点管理器) Worker  负责管理本节点的资源，并管理子进程,启动Driver和Executor
Container 容器 Executor 运行真正的计算逻辑的Task
Client(提交任务) Driver (Client+ ApplicationMaster)提交app，管理该任务的Executot并将Task提交到Executor
ApplicatiinMaster（AM） Driver （同上）
posted @ 2021-04-25 09:32  七彩木兰  阅读(160)  评论(0)  编辑  收藏  举报