2015年11月2日
摘要: 摘要通过input分片的大小来设置map的个数mapinputsplithadoop前言:在具体执行Hadoop程序的时候,我们要根据不同的情况来设置Map的个数。除了设置固定的每个节点上可运行的最大map个数外,我们还需要控制真正执行Map操作的任务个数。1.如何控制实际运行的map任务个数我们知... 阅读全文
posted @ 2015-11-02 22:02 IT小不点 阅读(483) 评论(0) 推荐(0) 编辑
摘要: hadoop1.2.1 MultipleOutputs将结果输出到多个文件或文件夹博客分类:http://tydldd.iteye.com/blog/2053867hadoophadoop1.2.1中使用MultipleOutputs将结果输出到多个文件或文件夹使用步骤主要有三步:1、在reduce... 阅读全文
posted @ 2015-11-02 21:59 IT小不点 阅读(571) 评论(0) 推荐(0) 编辑
摘要: 在Java中如何遍历Map对象How to Iterate Over a Map in Java在java中遍历Map有不少的方法。我们看一下最常用的方法及其优缺点。既然java中的所有map都实现了Map接口,以下方法适用于任何map实现(HashMap, TreeMap, LinkedHashM... 阅读全文
posted @ 2015-11-02 16:16 IT小不点 阅读(195) 评论(0) 推荐(0) 编辑