随笔分类 -  大数据

MapReduce流程及Shuffle机制
摘要：MapReduce流程 job的submit()方法创建一个Jobsubmmiter实例，调用submitJobInternal()方法。 资源管理器收到调用它的submitApplication()消息后，将请求传递给YARN调度器。调度器分配一个容器，然后资源管理器在节点管理器的管理下在容器启动 阅读全文
posted @ 2022-05-11 10:36 疾风儿 阅读(58) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示