会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
Questions张
博客园
首页
新随笔
联系
订阅
管理
2019年5月13日
CDH5.16.1的Yarn提交任务默认资源分配
摘要: 1 同时运行5个Spark任务的资源分配截图 2 每个任务占用3个Container 3个core以及4.5GB内存 也就是说一个Container需要 1个core 以及 512MB的内存 如果资源不够,可以提交任务时修改下内存分配,比如256MB,这样就可以提交更多的Spark任务到Yarn集群
阅读全文
posted @ 2019-05-13 09:32 Questions张
阅读(681)
评论(0)
推荐(0)
编辑
公告