waynelin

导航

MapReduce几个简单的例子

文件合并和去重:

  可以把每一行文本作为key,value为随意值。

数字排序:

  MapReduce过程中就有排序,它是按照key值进行排序的,如果key为封装int的IntWritable类型,那么MapReduce按照数字大小对key排序,如果key为封装为String的Text类型,那么MapReduce按照字典顺序对字符串排序。

 

IntWritable和Text作为输入输出的键值对类型,都可以通过set()设置值。

posted on 2016-08-12 16:27  维尼林  阅读(525)  评论(1编辑  收藏  举报