2022年2月15日
MapReduce代码编写--求性别人数、求总分、关联、map端的过滤、combiner预聚合
摘要： 主要基于数据 #students.txt /* 1500100001,施笑槐,22,女,文科六班 1500100002,吕金鹏,24,男,文科六班 1500100003,单乐蕊,22,女,理科六班 1500100004,葛德曜,24,男,理科三班 1500100005,宣谷芹,22,女,理科五班 1 阅读全文
posted @ 2022-02-15 16:07 赤兔胭脂小吕布 阅读(146) 评论(0) 推荐(0) 编辑
Map→shuffle→Reduce过程详解、WordCount示例程序处理流程图解、InputSplit（输入map时的切片）、TextInputFormat--中的LineRecordReader、MapReduce默认输入处理类、序列化、常用的Writable实现类
摘要： map阶段 shuffle阶段 reduce阶段 WordCount示例程序处理流程图解 InputSplit（输入map时的切片） TextInputFormat--中的LineRecordReader MapReduce默认输入处理类 序列化 常用的Writable实现类 阅读全文
posted @ 2022-02-15 15:58 赤兔胭脂小吕布 阅读(53) 评论(0) 推荐(0) 编辑
NameNode启动过程详细剖析、NameNode内存详解、十大经典排序算法、MapReduce中如何处理跨行的Block和InputSplit、YARN三种资源调度策略、观察者模式（Observer模式）详解、ZAB(zookeeper原子广播协议)
摘要： NameNode启动过程详细剖析： https://blog.csdn.net/cnhk1225/article/details/50786785 NameNode内存详解： https://hexiaoqiao.github.io/blog/2016/07/21/namenode-memory-d 阅读全文
posted @ 2022-02-15 10:55 赤兔胭脂小吕布 阅读(55) 评论(0) 推荐(0) 编辑