Hadoop完全分布式集群环境搭建

 

一.  系统环境

主机操作系统:Windows10家庭中文版

  • os : Ubuntu 16.04 LTS 64bit

jdk : 1.8.0_161

hadoop : 2.6.4

VMware Workstation:创建虚拟机

二.  操作步骤

  1. 乌班图安装完成
  2. 安装SSH完成、修改root权限,reboot重启
  3. VMTools安装完成,便于下步拷贝主机Java、Hadoop安装文件到虚拟机(这里老师没讲,我是自学觉得这个工具方便一点,具体安装可以去百度VMTools安装,然后就可以直接从主机复制粘贴文件到虚拟机)

 

 

4.Java安装并配置环境变量 

5.Hadoop安装并配置环境变量

6.克隆虚拟机

7 三台虚拟机修改静态IP,修改主机名,修改Hosts文件(这一步一开始没有弄好,静态IP的设置出现了几个问题,导致推倒重来了几次)

8 三台虚拟机关闭防火墙

9 设置SSH免密登录

10.Root设置SSH免密登录

11.配置文件修改,完全分布式集群需要配置的环境:HDFS、Mapreduce、Yarn组件。

12.格式化NameNode,启动环境。

13.输入jps查看

 

 

 

 

附:

下面是安装过程中建立的快照:

 

 

 

 

posted @ 2020-04-03 14:06  颠沛流离人  阅读(445)  评论(0)    收藏  举报