使用history命令查看作业的整体执行情况
1)通过使用history命令,我们可以深入到一个Job的任务级层面查看执行最快的任务,以及执行最慢的任务,以及其他的有用信息。命令如下:
hadoop job -history /output
“/ouptut”就是要查询的job的输出路径,如果输出路径位于hdfs的根目录下,有时候会忘记添加“/”,也就是使用如下命令:
hadoop job -history output
就会出现如下提示:
就是因为没有提高正确的路径,所以找不到文件,触发了IO异常。
2)当我们使用了history命令,得到关于job的关键信息如下: