Hadoop 集群安装(从节点安装配置)
1、Java环境配置
view plain copy
sudo mv /tmp/java /opt/
jdk安装完配置环境变量,编辑/etc/profile:
view plain copy
sudo vim /etc/profile
在文件末尾,添加如下内容:
view plain copy
export JAVA_HOME=/opt/java/
export PATH=\(JAVA_HOME/bin:\)PATH
刷新环境变量:
view plain copy
source /etc/profile
利用java查看版本号命令验证是否安装成功:
view plain copy
java -version
2、修改hosts文件
编辑/etc/hosts文件:
view plain copy
sudo vim /etc/hosts
添加本机IP地址对应本机映射名和其它节点IP地址对应映射名:
view plain copy
0.0.0.0 master
0.0.0.0 slave1
0.0.0.0 slave2
节点IP地址即”内网管理地址“
3、创建公钥
在zhangyu用户下创建公钥:
view plain copy
ssh-keygen
出现如下内容:
Enter file in which to save the key (/home/zhangyu/.ssh/id_rsa):
直接使用默认选项,回车即可,出现如下内容:
Enter passphrase (empty for no passphrase):
直接回车,出现内容:
Enter same passphrase again:
直接回车,创建完成。
拷贝公钥,过程中需要输入用户密码:"zhangyu"
view plain copy
ssh-copy-id master
view plain copy
ssh-copy-id slave1
view plain copy
ssh-copy-id slave2
命令执行过程中需要输入“yes”和密码“zhangyu”。
拷贝完可以测试连接。
4、Hadoop环境配置
view plain copy
sudo mv /tmp/hadoop /opt/
hadoop安装完配置环境变量,编辑/etc/profile:
view plain copy
sudo vim /etc/profile
在文件末尾添加如下内容:
view plain copy
export HADOOP_HOME=/opt/hadoop/
export PATH=\(HADOOP_HOME/bin:\)PATH
刷新环境变量:
view plain copy
source /etc/profile
利用hadoop查看版本号命令验证是否安装成功:
view plain copy
hadoop version
5、创建数据文件夹:
view plain copy
sudo mkdir /data
所有者修改为当前用户:
view plain copy
sudo chown -R zhangyu.zhangyu /data
至此,从节点1配置完成。