cloudera安装hadoop集群和相关服务
一.软件准备:
1.下载cloudera-manager-installer.bin(安装。。。-server),cdh4、cm(这是。。。-agent),另外还有些需要的关联软件下步添加。
2.先建本地源(详见http://blog.csdn.net/jiangheng0535/article/details/10297763),然后下载cloudera-manager-server的关联软件(不清楚具体需要哪些),本人是在本地安装一次server,这样需要的软件都在本地源的机器上,按步骤添加到源即可。另外把cm和cdh4也放在apache的服务目录下,作为源。
二.环境搭配hosts修改,不详述。
3.假如有5台机器,命名为server、test1、test2、。。Test4,server作为服务器server,其他4台作为主机,主机的/etc/hostname分别更改自己机器的hostname。然后再hosts文件加入如下:test1IP test1 回车 test2IP test2 回车 。。。。。。。。。Test4,这样环境搭配完毕。
三.Server安装
4.在server机上安装server,先把cloudera-manager-installer.bin放到机器任意目录下,赋予可执行权限。然后./cloudera-manager-installer.bin,开始安装(这里server的apt-get源已经是本地),这里会安装失败,根据提示可到日志文件查看,一般是oraclej2.。。。。。安装失败,这里的原因是安装此软件需要你手动输入yes,电脑才给你继续安装,但是这个过程没显示,自然也不能输入yes,所以失败。根据日志,可以手动apt-get install 需要的软件名称,然后yes、yes即可,下面还会遇到同样问题,安装完即可。
5.提示成功后,在浏览器输入IP:7180,进入server管理端,表示成功
四,cdh安装:
6.用户名admin密码admin,然后添加主机(主机必须有ssh服务),继续安装。
7.然后出现主机配置需要的软件版本,选择自定义
如果需要impala、solr自行添加,这里都是无。
8.继续安装
这里安装也会提示失败,原因同样是无法输入yes,这里同样用apt-get手动安装需要的软件(软件源已经添加,这些源在cdh4或者你自己添加的本地源里面,其中cdh4与cm测点源在你前面配置的时候已经自动添加到/etc/apt/sources.list.d内,所以apt-get就可以安装),安装完成后成功。
9.
这里选择默认即可,先在主机上安装postgresql并启动成功,然后测试连接、继续主机检查
全部正确后
根据需要即可,进入一个配置目录,基本可以默认
这样本地源安装cdh就完成了,可能有些主机是badhealth,这不是安装的问题,而是机器的问题,可能是主机时间不一致、可能是空间不够。