摘要：
一。前述 今天起剖析源码，先从Client看起，因为Client在MapReduce的过程中承担了很多重要的角色。 二。MapReduce框架主类 代码如下： 第一步，先分析Job，可以看见源码中Job实现了public class Job extends JobContextImpl implem 阅读全文
摘要：
一。前述 有了上次hadoop集群的搭建，搭建yarn就简单多了。废话不多说，直接来 二。规划 三。配置如下 yarn-site.xml配置 <property> <name>yarn.nodemanager.aux-services</name> <value>mapreduce_shuffle< 阅读全文
摘要：
一。前述 本来有套好好的集群，可是不知道为什么虚拟机镜像文件损坏，结果导致集群不能用。所以不得不重新搭套集群，借此机会顺便再重新搭套吧，顺便提醒一句大家，自己虚拟机的集群一定要及时做好快照，最好装完每个东西后记得拍摄快照。要不搞工具真的很浪费时间，时间一定要用在刀刃上。废话不多说，开始准备环境搭建， 阅读全文