2019年3月7日
【Spark工作原理】stage划分原理理解
摘要： Job->Stage->Task开发完一个应用以后，把这个应用提交到Spark集群，这个应用叫Application。这个应用里面开发了很多代码，这些代码里面凡是遇到一个action操作，就会产生一个job任务。 一个Application有一个或多个job任务。job任务被DAGScheduler 阅读全文
posted @ 2019-03-07 22:07 wwcom123 阅读(1858) 评论(0) 推荐(1) 编辑