MapReduce其他功能
如何获取mr当前文件名称:
//获取当前处理切片 FileSplit fileSplit = (FileSplit)context.getInputSplit(); //根据当前切片获取 String fileName = fileSplit.getPath().getNmae(); |
mr程序是否可以没有reduce阶段?
答;如果可以,全局默认一个reduceTask
job.setNumReduceTasks(0)
解答:
如果没有reduceTask mr会直接调用输出数据组件 tEXToutPutFormat 直接输出
part-m-000000 m表示该输出是由maptask完成的 |
本文版权归作者和博客园共有,欢迎转载,但必须给出原文链接,并保留此段声明,否则保留追究法律责任的权利。