10 2014 档案
摘要：众所周知，Hadoop框架使用Mapper将数据处理成一个键值对，再网络节点间对其进行整理(shuffle)，然后使用Reducer处理数据并进行最终输出。 在上述过程中，我们看到至少两个性能瓶颈：如果我们有10亿个数据，Mapper会生成10亿个键值对在网络间进行传输，但如果我们只是对数据求最大值...
阅读全文
摘要：模板模式中，父类规定好了一些算法的流程，并且空出一些步骤（方法）留给子类填充Java的数组类中静态方法sort()就是一个模板，它空出了一个compareTo的方法，留给子类填充，用来规定什么是大于、等于和小于package com.example.template;public class Duc...
阅读全文
