1.3源码是如此,后面新版本源码会尽可能的根据用户shell配置的参数进行分配
1.spareadOutApps 尽可能分配到多的机器上面execute和CPU core
2.非spareadoutapps 尽可能少的分配到少的机器上,机器尽可能多的容纳execute和CPU core
总结:所以用户shell文件的分配不一定和spark本身分配的一致
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】凌霞软件回馈社区,博客园 & 1Panel & Halo 联合会员上线
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】博客园社区专享云产品让利特惠,阿里云新客6.5折上折
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步