2018年8月17日
spark exectors的启动总结
摘要： 在spark启动之后，worker和master注册通信之后，在进入用户提交app中，new SparkContext之后就会在worker上分配exectors了。 首先在sparkContext中，会先创建和启动TaskScheduler和DAGSchedule 在创建TaskScheduler 阅读全文
posted @ 2018-08-17 20:35 刘姥爷观园子 阅读(740) 评论(0) 推荐(0) 编辑