会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
夏日的向日葵
博客园
首页
新随笔
联系
订阅
管理
2020年6月27日
spark之Executor与初始化SparkSession
摘要: 关于Executor: 一个executor同时只能执行一个计算任务 但一个worker(物理节点)上可以同时运行多个executor executor的数量决定了同时处理任务的数量 一般来说,分区数远大于executor的数量才是合理的 同一个作业,在计算逻辑不变的情况下,分区数和executor
阅读全文
posted @ 2020-06-27 11:56 夏日的向日葵
阅读(2083)
评论(0)
推荐(0)
编辑
公告