会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
//
// // //
努力的孔子
2019年12月10日
spark内核篇-任务调度机制
摘要: 在生产环境中,spark 部署方式一般都是 yarn-cluster 模式,本文针对该模式进行讲解,当然大体思路也适用于其他模式 基础概念 一个 spark 应用包含 job、stage、task 三个概念 job:以 action 方法为界,一个 action 触发一个 job stage:它是
阅读全文
posted @ 2019-12-10 11:25 努力的孔子
阅读(615)
评论(0)
推荐(0)
编辑
导航
博客园
首页
新随笔
新文章
联系
订阅
管理