2019年1月9日
MapReduce编程：单词去重
摘要： 编程实现单词去重要用到NullWritable类型。 NullWritable： NullWritable 是一种特殊的Writable 类型，由于它的序列化是零长度的，所以没有字节被写入流或从流中读出，可以用作占位符。比如，在MapReduce 中，在不需要这个位置的时候，键或值能够被声明为Nul 阅读全文
posted @ 2019-01-09 21:33 Kayden_Cheung 阅读(544) 评论(0) 推荐(0) 编辑
Hadoop数据类型
摘要： hadoop包装了java的基本数据类型使他们实现以上的接口而且给予实现细节，这些类都实现了WritableComparable接口，能够在不同的hadoop节点之间毫无障碍的传输了。 阅读全文
posted @ 2019-01-09 20:35 Kayden_Cheung 阅读(237) 评论(0) 推荐(0) 编辑
MapReduce编程：词频统计
摘要： 首先在项目的src文件中需要加入以下文件，log4j的内容为： log4j.rootLogger=INFO, stdout log4j.appender.stdout=org.apache.log4j.ConsoleAppender log4j.appender.stdout.layout=org. 阅读全文
posted @ 2019-01-09 15:37 Kayden_Cheung 阅读(494) 评论(0) 推荐(0) 编辑
//目录