2020年6月27日
spark之Executor与初始化SparkSession
摘要： 关于Executor： 一个executor同时只能执行一个计算任务 但一个worker(物理节点)上可以同时运行多个executor executor的数量决定了同时处理任务的数量 一般来说，分区数远大于executor的数量才是合理的 同一个作业，在计算逻辑不变的情况下，分区数和executor 阅读全文
posted @ 2020-06-27 11:56 夏日的向日葵 阅读(2083) 评论(0) 推荐(0) 编辑