修改hadoop备份数

1:hadoop中备份数设置:(hdfs-site.xml)

<property>
<name>dfs.replication</name>
<value>3</value>
</property>

2:hadoop中备份数修改:

hadoop dfs -setrep [-R] <path> 如果有-R将修改子目录文件的性质。hadoop dfs -setrep -w 3 -R /user/hadoop/dir1 就是把目录下所有文件备份系数设置为3.

3:hadoop中查看当前某个文件的备份数:

hadoop dfs -ls [filename]  结果行中的第二列是备份系数 (注:文件夹信息存储在namenode节点上,所以没有备份,故文件夹的备份系数是横杠)

4:hadoop集群的检查备份冗余情况:

hadoop fsck / 可以方便的看到各种类型block所占比例。

5:自动负载均衡hadoop文件:hadoop balancer

6:查看各节点的磁盘占用情况 hadoop dfsadmin -report

posted @ 2012-11-16 16:18  出发一路向北  阅读(2303)  评论(0编辑  收藏  举报