Hadoop的安装与配置

1 安装JDK

官网：https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html

镜像：https://repo.huaweicloud.com/java/jdk/

• 首先下载jdk linux安装包 jdk-11_linux-x64_bin.tar.gz

• 上传到linux服务器

• jdk解压

• 修改jdk文件夹名

• 修改配置文件

#上传文件
rz -E 选择文件上传到服务器
#解压文件
tar -xzvf jdk-11_linux-x64_bin.tar.gz -C /usr/local
#修改文件名
mv jdk-11/ jdk
#修改配置
vim /etc/profile
...
export JAVA_HOME=/usr/local/jdk
export PATH=$PATH:$JAVA_HOME/bin:
export CLASSPATH=$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
#立刻使配置生效
source /etc/profile

2 安装hadoop

官网: <http://hadoop.apache.org/releases.html

• 下载hadoop二进制安装包

• 上传到服务器

• 解压

• 修改文件名

• 修改配置

• 激活配置

#上传文件
rz -E 选择文件上传到服务器
#解压文件
tar -xzvf hadoop-3.2.1.tar.gz -C /usr/local
#修改文件名
mv hadoop-3.2.1/ hadoop
#修改配置
vim /etc/profile
...
export JAVA_HOME=/usr/local/jdk
export HADOOP_HOME=/usr/local/hadoop
export PATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:
export CLASSPATH=$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
#立刻使配置生效
source /etc/profile

# 修改hadoop配置文件jdk
vim /usr/local/hadoop/etc/hadoop/hadoop-env.sh
52 # The java implementation to use. By default, this environment
53 # variable is REQUIRED on ALL platforms except OS X!
54 export JAVA_HOME=/usr/local/jdk