hadoop的NullWritable

NullWritable是Writable的一个特殊类,实现方法为空实现,不从数据流中读数据,也不写入数据,只充当占位符,如在MapReduce中,如果你不需要使用键或值,你就可以将键或值声明为NullWritable,NullWritable是一个不可变的单实例类型。

比如,我设置map的输出为<key,空>,这样做:

1 public class IPCountMapper extends Mapper<LongWritable, Text, Text, NullWritable> {
2 
3     @Override
4     protected void map(LongWritable key, Text value, Mapper<LongWritable, Text, Text, NullWritable>.Context context)
5             throws IOException, InterruptedException {
6         String parseIP = LogParseUtil.parseIP(value.toString());
7         context.write(new Text(parseIP), NullWritable.get());
8     }

不能使用new NullWritable()来定义,获取空值只能NullWritable.get()来获取

posted @ 2016-08-28 17:33  Xu Feng  阅读(14369)  评论(0编辑  收藏  举报