孟尧 - 博客园

2013年2月8日

摘要： 1 package com.mengyao.hadoop.mapreduce; 2 3 import java.io.IOException; 4 import java.net.URI; 5 import java.net.URISyntaxException; 6 import ... 阅读全文

posted @ 2013-02-08 19:45 孟尧阅读(400) 评论(0) 推荐(0) 编辑

MapReduce的SequenceFileOutputFormat使用

摘要： package com.mengyao.hadoop.mapreduce;import java.io.IOException;import java.text.SimpleDateFormat;import java.util.Date;import org.apache.hadoop.conf.... 阅读全文

posted @ 2013-02-08 16:44 孟尧阅读(674) 评论(0) 推荐(0) 编辑

MapReduce的DBOutputFormat使用

摘要： package com.mengyao.hadoop.mapreduce;import java.io.DataInput;import java.io.DataOutput;import java.io.IOException;import java.sql.PreparedStatement;i... 阅读全文

posted @ 2013-02-08 12:42 孟尧阅读(410) 评论(0) 推荐(1) 编辑

2013年2月7日

MapReduce的Mapper端JOIN

摘要： 1 package com.mengyao.hadoop.mapreduce; 2 3 import java.io.IOException; 4 import java.text.SimpleDateFormat; 5 import java.util.Date; 6 import... 阅读全文

posted @ 2013-02-07 14:48 孟尧阅读(329) 评论(0) 推荐(0) 编辑

MapReduce的自定义分组

摘要： 1 package com.mengyao.hadoop.mapreduce; 2 3 import java.io.IOException; 4 import java.text.SimpleDateFormat; 5 import java.util.Date; 6 7 im... 阅读全文

posted @ 2013-02-07 10:17 孟尧阅读(294) 评论(0) 推荐(0) 编辑

2013年2月6日

MapReduce的CombineFileInputFormat使用

摘要： 1 package com.mengyao.hadoop.mapreduce; 2 3 import java.io.IOException; 4 import java.util.Iterator; 5 6 import org.apache.hadoop.conf.Config... 阅读全文

posted @ 2013-02-06 23:13 孟尧阅读(609) 评论(1) 推荐(0) 编辑

MapReduce的SequenceFileInputFormat使用

摘要： 1 package com.mengyao.hadoop.mapreduce; 2 3 import java.io.IOException; 4 import java.util.Iterator; 5 6 import org.apache.hadoop.conf.Config... 阅读全文

posted @ 2013-02-06 15:05 孟尧阅读(746) 评论(1) 推荐(0) 编辑

MapReduce的NLineInputFormat使用

摘要： 1 package com.mengyao.hadoop.mapreduce; 2 3 import java.io.IOException; 4 5 import org.apache.hadoop.conf.Configuration; 6 import org.apache.... 阅读全文

posted @ 2013-02-06 00:34 孟尧阅读(872) 评论(1) 推荐(0) 编辑

2013年2月5日

MapReduce的KeyValueTextInputFormat使用

摘要： 1 package com.mengyao.hadoop.mapreduce; 2 3 import java.io.IOException; 4 5 import org.apache.hadoop.conf.Configuration; 6 import org.apache.... 阅读全文

posted @ 2013-02-05 23:17 孟尧阅读(569) 评论(1) 推荐(0) 编辑

MapReduce的自定义分区

摘要： MapReduce有4种Partitioner，如下： HashPartitioner，默认的分区。计算方法：which reducer = (key.hashCode() & Integer.MAX_VALUE) % numReduceTasks HashPar... 阅读全文

posted @ 2013-02-05 16:31 孟尧阅读(321) 评论(0) 推荐(0) 编辑

孟尧

前途宽广，贵在坚持

公告