Hadoop 故障整理
1、关于DataNode 错误信息解析
错误内容
java.io.IOException: Incompatible clusterIDs in /opt/hadoop/dfs/data: namenode clusterID = CID-40d92cfa-751c-4589-b89c-43f90751214b; datanode clusterID = CID-fe4d7495-2157-4bc2-9f03-5bdade0be587
原因及处理方法
原因: 由于多次 format 导致, NameNode 节点 clusterID值与DataNode 节点clusterID 值不相等。 处理方法: 1、 修改 DataNode 节点的 clusterID 与 NameNode clusterID 值相等。
2、修改文件位置:例:/opt/hadoop/dfs/data/current/VERSION
3、VERSION 文件内容如下: storageID=DS-3fab65fb-ec2b-495c-831d-bb59151f7788 clusterID=CID-40d92cfa-751c-4589-b89c-43f90751214b cTime=0 datanodeUuid=211d8c5d-edd9-4bc7-90e6-5ac17c129deb storageType=DATA_NODE layoutVersion=-56