将SeqReader打包成可执行的jar包

SeqReader是我定义的一个读取SequenceFile文件，并将部分（key，value）打印到控制台窗口的类，其完整代码如下：

/**
 * Created with IntelliJ IDEA.
 * User: hadoop
 * Date: 16-3-14
 * Time: 上午9:57
 * To change this template use File | Settings | File Templates.
 */
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.SequenceFile;
import org.apache.hadoop.io.Writable;
import org.apache.hadoop.io.IntWritable;
import org.apache.hadoop.io.DoubleWritable;
import org.apache.hadoop.io.ArrayWritable;
import org.apache.hadoop.util.ReflectionUtils;

import java.io.IOException;
import java.net.URI;

public class SeqReader  {
    public static void main(String[] args) throws IOException {
        String uri=args[0];
        //String uri="/home/hadoop/2016Test/SeqTest/10IntArray";
        Configuration conf=new Configuration();
        FileSystem fs =FileSystem.get(URI.create(uri),conf);
        Path path=new Path(uri);
        SequenceFile.Reader reader=null;
        //DoubleWritable[] doubleWritableArray=new DoubleWritable[Integer.parseInt(args[1])];

       /* for (int i=0;i<doubleWritableArray.length;++i){
            doubleWritableArray[i]=new DoubleWritable(0.0);
        }
        */
        try {
            reader=new SequenceFile.Reader(fs,path,conf);
            IntWritable key =(IntWritable) ReflectionUtils.newInstance(reader.getKeyClass(), conf);
            DoubleArrayWritable value=(DoubleArrayWritable)ReflectionUtils.newInstance(reader.getValueClass(),conf);
            long position=reader.getPosition();
            String[] sValue=null;
            int index;
            int counter=0;
            StringBuilder sb=new StringBuilder();
            while(reader.next(key,value)){
                if(key.get()%Integer.parseInt(args[1])==0){
                    System.out.println("key:"+key.get());
                    index=-1;
                    for (Writable val:value.get()){
                    //doubleWritableArray[++index].set(((DoubleWritable)val).get());
                        if (counter>10){
                            break;
                        }
                        counter++;
                        sb.append(((DoubleWritable)val).get()).append(",");
                    }
                    System.out.println("value:"+sb.toString());

                }

            }
        }
        finally {
            //IOUtils.closeStream(reader);
        }
    }

}
class DoubleArrayWritable extends ArrayWritable {
    public DoubleArrayWritable(){
        super(DoubleWritable.class);
    }
    /*
    public String toString(){
        StringBuilder sb=new StringBuilder();
        for (Writable val:get()){
            DoubleWritable doubleWritable=(DoubleWritable)val;
            sb.append(doubleWritable.get());
            sb.append(",");
        }
        sb.deleteCharAt(sb.length()-1);
        return sb.toString();
    }
    */
}

 关于生成可执行jar包，这里只说几点需要注意的地方，详细信息可以参考：http://www.cnblogs.com/lz3018/p/5228639.html

1）首先就是MANIFEST.MF文件的配置，应该保证配置完成之后，文件有一个空白行，使用gedit编辑此文件，打开“显示行号”功能。

 

前4行是我们配置的有效内容，第5行就是我们文件需要的空白行，第6行是目前准备写入字符的行，此时我们就保存文件，那我们文件内容就是包含有字符的前四行，外加一个空白行，也就是我们文件总共有5行。

2）对于Main-Class，当我们的类中没有定义包名的话，那么只需要写主类名称就可以了。（只有eclipse中采用默认包名就是类名这一说法吧）

3）当我们使用jar cfm SeqWriter.jar MANIFEST.MF *.class重新打jar包之后，使用命令java -jar SeqWriter.jar part-r-00000 1000运行jar包时，提示"NoClassDefFoundError"：

也就是找不到类 /org/apache/commons/logging/LogFactorty，这个类是在commons-logging-1.1.1中，我们只需要添加这个jar包就可以了，怎么添加了，就是在MANIFEST.MF文件在添加Class-Path属性，给属性配置这个jar包的路径就可以了(多个jar包用空格分隔)，完成上述操作之后，使用jar命令重新生成jar包，再使用java -jar执行jar包，然后又出现如下提示：

还是找不到类，仍然是按照上述方法将commons-configuration-1.6.jar的路径添加到Class-Path中，再重新打包、运行·，如下：

同样的，将comons.lang-2.4.jar的路径添加到Class-Path中，然后重新打包、运行，结果如下所示：

成功运行。