摘要: 4.输出数据outputformat接口实现类5.mapreduce内核源码解析5.1.maptask工作机制(1)read阶段:maptask通过inputformat获得的recordreader,从输出 inputsplit中解析一个个key/value5.2.reducetask工作机制5. 阅读全文
posted @ 2024-09-10 01:03 dededea 阅读(4) 评论(0) 推荐(0) 编辑
摘要: MR一.MR概述1.mr定义Mr是一个分布式运算程序的编程框架,是用户开发”基于hadoop的数据分析应 用”的核心框架Mr核心功能是将用户编写的业务逻辑代码和自带默认组件整合成一个完整地 分布式运算程序,并发运行在一个hadoop集群上2.mr优缺点2.1.优点(1)易于编程.用户只关心业务逻辑. 阅读全文
posted @ 2024-09-10 01:01 dededea 阅读(17) 评论(0) 推荐(0) 编辑