摘要: 《hadoop the definitive way》(third version)中的Benchmarking a Hadoop Cluster Test Cases的class在新的版本中已不再试hadoop-*-test.jar, 新版本中做BanchMark Test应采用如下方法:1. TestDFSIOwriteTestDFSIO用来测试HDFS的I/O 性能,用一个MapReduce job来并行读取/写入文件, 每个文件在一个独立的map task里被读取或写入,而map的输出用来收集该文件被执行过程中的统计数据,test1 写入2个文件,每个10MB%yarn jar sha 阅读全文
posted @ 2014-03-17 10:08 ruanjian28 阅读(342) 评论(0) 推荐(0) 编辑