会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
超大的皮卡丘
用你的激情与热情,感染更多的人,影响更多的人。
博客园
首页
新随笔
联系
订阅
管理
2016年11月26日
Spark Job的提交与task本地化分析(源码阅读八)
摘要: 我们又都知道,Spark中任务的处理也要考虑数据的本地性(locality),Spark目前支持PROCESS_LOCAL(本地进程)、NODE_LOCAL(本地节点)、NODE_PREF、RACK_LOCAL(本地机架)、ANY(任何)几种。其他都很好理解,NODE_LOCAL会在spark日志中
阅读全文
posted @ 2016-11-26 04:32 松伯
阅读(758)
评论(0)
推荐(0)
编辑