centOS-7下之hadoop分布式安装以及集群配置
1、安装前我们需要了解一些知识和安装前的准备工作
namenode:主节点
datanode:从节点
我们需要4个节点,也就是说我们需要安装四个linux操作系统。
linux操作系统:centOS7
linux下载地址:https://www.centos.org/download/,点进连接,选择DVD ISO
hadoop下载地址:http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-2.6.5/hadoop-2.6.5.tar.gz
安装包文件名:hadoop-2.6.5.tar.gz
2、linux的安装注意
推荐安装mini版本的,这样我们就不需要卸载系统自带的openJDK。
20G的磁盘分区:/boot 250 Mib ext4
/home 2048 Mib ext4
/ 4096 Mib ext4
/swap 13.7 Gib swap
linux用户设置为hadoop,root用户权限太大,实际工作中未必会让你使用;
我们一台电脑通过虚拟机安装4个linux系统,建议虚拟机的网络设置为NAT,,若果设置为桥接模式的话,那就多台电脑较好;
centOS的网卡设置:vi /etc/sysconfig/network-scripts/ifcfg-ens33 具体设置参考我的另一篇文章:-----
这里我们设置:
master130的ip:192.168.47.130
slave131的ip:192.168.47.131
slave132的ip:192.168.47.132
slave133的ip:192.168.47.133
修改每个linux的hostname:
vi /etc/sysconfig/network
NETWORKING=yes
HOSTNAME=master130