Hadoop完全分布式集群环境搭建
一. 系统环境
主机操作系统:Windows10家庭中文版
- os : Ubuntu 16.04 LTS 64bit
jdk : 1.8.0_161
hadoop : 2.6.4
VMware Workstation:创建虚拟机
二. 操作步骤
- 乌班图安装完成
- 安装SSH完成、修改root权限,reboot重启
- VMTools安装完成,便于下步拷贝主机Java、Hadoop安装文件到虚拟机(这里老师没讲,我是自学觉得这个工具方便一点,具体安装可以去百度VMTools安装,然后就可以直接从主机复制粘贴文件到虚拟机)
4.Java安装并配置环境变量
5.Hadoop安装并配置环境变量
6.克隆虚拟机
7 三台虚拟机修改静态IP,修改主机名,修改Hosts文件(这一步一开始没有弄好,静态IP的设置出现了几个问题,导致推倒重来了几次)
8 三台虚拟机关闭防火墙
9 设置SSH免密登录
10.Root设置SSH免密登录
11.配置文件修改,完全分布式集群需要配置的环境:HDFS、Mapreduce、Yarn组件。
12.格式化NameNode,启动环境。
13.输入jps查看
附:
下面是安装过程中建立的快照:
路漫漫其修远兮,吾将上下而求索