2013年2月11日
MapReduce-集群HA模式配置
摘要： 集群HA模式下的MapReduce代码设置 Configuration conf = HBaseConfiguration.create();conf.set("hbase.zookeeper.quorum", "zk1:2181,zk2:2181,zk3:2181");conf.set("hbas 阅读全文
posted @ 2013-02-11 19:52 孟尧 阅读(215) 评论(0) 推荐(0) 编辑
MapReduce作业-切片和Shuffle
摘要： 把输入文件切分成块、由块变成key和value到Mapper类map(k1, v1)的过程 控制输入文件切分、生成key和value传递到Mapper类的map()方法使用（InputFormat，它是一个抽象类，实现则由各个子类完成）： 通常在每个MapReduce的Job中，都会调用jo... 阅读全文
posted @ 2013-02-11 15:10 孟尧 阅读(514) 评论(0) 推荐(0) 编辑