会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
barrenlake
博客园
首页
新随笔
联系
订阅
管理
2015年6月4日
Spark 资源调度及任务调度
摘要: 1、 资源分配 通过SparkSubmit进行提交应用后,首先会创建Client将应用程序(字节码文件.class)包装成Driver,并将其注册到Master。Master收到Client的注册请求后将其加入待调度队列waitingDrivers,并等待分配执行资源。1.1 Dirver调度(分配...
阅读全文
posted @ 2015-06-04 08:23 barrenlake
阅读(3688)
评论(0)
推荐(0)
编辑