centos6.6安装hadoop-2.5.0(五、部署过程中的问题解决)

操作系统:centos6.6

环境:selinux disabled;iptables off;java 1.8.0_131

安装包:hadoop-2.5.0.tar.gz

 

一、安装过程中会出现WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable的问题;

通过debug模式观察,是glibc-1.14 not found,然后升级系统的glibc到2.14.1;

debug模式设置:

  #vim /etc/profile

  

  #source /etc/profile

软件包的下载地址:https://pan.baidu.com/s/1dzRKGu;

执行安装命令:#yum localhost glibc*

查看glibc版本:#rpm -qa | grep  glibc

 

 二、格式化文件系统之前一定要先stop namenode、datanode、secondarynode,否则格式化之后在stop\start namenode会报txid的值不对的问题

 

三、重新格式化的时候,需要删除tmp临时目录下的dfs文件,让NameNode和Datenode目录重新产生,否则会出现NameNodeID和DataNodeID不一致,服务启动报错

namenode和datanode的clientid值必须保持一致才能成为一个集群,否则会有namenode或者datanode节点启动不启来,clientid的位置在tmp/dfs/data、name/VERSION

posted @ 2018-02-26 16:53  勤奋的雪雪大人  阅读(129)  评论(0编辑  收藏  举报