2012年4月20日

Hadoop debug 方法

摘要: 做hadoop开发,需要对hdfs,mapreduce组件等进行修改、测试,如果每次做修改后都打成jar包上传到服务器打log测试的话将非常麻烦和耗时的。所以如果能够通过eclipse进行远程调试将会非常方便与惬意的。 hadoop远程调试十分简单,只需要自己hack很少的代码就可以完成。步骤如下: 首先拷贝$HADOOP_HOME/bin/hadoop 到一个文件如$HADOOP_HOME/bin/hadoop-debug 在最后一行修改,原来的bash代码是else # run it exec "$JAVA" -Dproc_$COMMAND $JAVA_HEAP_M.. 阅读全文

posted @ 2012-04-20 09:50 萌@宇 阅读(1689) 评论(0) 推荐(0) 编辑

导航