hadoop-磁盘出现坏盘,如何能在线换盘

涉及到磁盘存储路径的配置文件参数有:

hdfs-site.xml

<name>dfs.datanode.data.dir</name>

yarn-site.xml

<name>yarn.nodemanager.local-dirs</name>

将这两个参数的value中的坏盘路径去掉,重启datanode、nodemanager就可以在线换盘了

虽然这样做要多重启一次hadoop进程,但是可以降低换盘对hadoop集群的影响(业务流程的运行及流程执行时间),因为你可以挑选集群相对空闲的时候启停hadoop进程

 

记住,换盘完成后,hadoop进程启动前,要把data.dir的目录建上、赋权(如果配置的存储目录,没有给hadoop用户赋权的话)

posted on 2016-05-18 11:32  roger888  阅读(2190)  评论(0编辑  收藏  举报

导航