摘要: import java.io.IOException;import org.apache.hadoop.io.IntWritable;import org.apache.hadoop.io.LongWritable;import org.apache.hadoop.io.Text;import org.apache.hadoop.mapred.MapReduceBase;import org.apache.hadoop.mapred.Mapper;import org.apache.hadoop.mapred.OutputCollector;import org.apache.hadoop.m 阅读全文
posted @ 2011-08-19 16:14 glose 阅读(390) 评论(0) 推荐(0) 编辑
摘要: 这里需要进行一点额外的工作才能使得URL识别hdfs的uri。我们要使用java.net.URL的 setURLStreamHandlerFactory()方法设置URLStreamHandlerFactory,这里需要传递一个 FsUrlStreamHandlerFactory。这个操作对一个jvm只能使用一次,我们可以在静态块中调用。publicclass FIleSystemCat { /** * @param args * @throws IOException */static { //这句是为了让程序识别hdfs协议而进... 阅读全文
posted @ 2011-08-19 13:57 glose 阅读(2595) 评论(0) 推荐(0) 编辑