摘要:
DAGScheduler最终创建了task set,并提交给了taskScheduler。那先得看看task是怎么定义和执行的。Task是execution执行的一个单元。Task: executor执行的基本单元,也是spark操作的最小单位。和java executor的task基本上是相同含义的。/** * A unit of execution. We have two kinds of ... 阅读全文
摘要:
DAGScheduler最终创建了task set,并提交给了taskScheduler。那先得看看task是怎么定义和执行的。Task是execution执行的一个单元。Task: executor执行的基本单元,也是spark操作的最小单位。和java executor的task基本上是相同含义的。/** * A unit of execution. We have two kinds of ... 阅读全文
|