1、检测hadoop运行状态信息

  hadoop dfsadmin -report  打印出hadoop中硬盘的使用信息

  

2、 hadoop中创建归档文件

  hadoop archive -archiveName example.har -p /tmp/input dir1 dir2 -r 2 /tmp/output/

  其中example.har为hadoop中归档文件的特殊格式,-p指定父目录,dir1和dir2为需要归档的文件夹,-r指定了复制的份数,最后为结果输出目录

 

3、 hadoop安全模式

  hadoop dfsadmin -safemode enter | leave | get | wait

  分别表示进入,离开,获取信息,等待

  分布式文件系统刚启动或者datanode汇报给namenode的块信息与namenode中的元数据不同比例超过阀值时,hadoop会进入安全模式。安全阀值由配置项dfs.safemode.threshold.pct来确定。

  默认为0.999。系统处于安全模式中时,不允许对文件进行修改或删除。

 

4、 hadoop 将文件内容追加到hdfs上

  hadoop dfs -appendToFile localfile1 /tmp/output/file2

  hadoop dfs -appendToFile localfile1 localfile2 /tmp/output/file3

 

posted on 2015-01-26 20:06  ayy2014  阅读(972)  评论(0编辑  收藏  举报