会员
周边
众包
新闻
博问
闪存
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
西伯尔
博客园
首页
新随笔
联系
管理
2020年7月13日
Spark任务调度和资源分配
摘要: 1.Spark Context 向集群申请的资源具体有哪些? 内存和CPU。 2.Spark Context 通过什么配置方式向集群申请这些资源?或者说如何调节这些资源的数量? spark的分配资源主要就是 executor、cpu per executor、memory per executor、
阅读全文
posted @ 2020-07-13 11:13 西伯尔
阅读(359)
评论(0)
推荐(0)
编辑