第五周学习总结

这周主要是下载安装Hadoop并学习相关知识。

Hadoop目录结构：

1. bin目录：存放对Hadoop相关服务（hdfs，yarn，mapred）进行操作的脚本；

2.etc目录：Hadoop的配置文件目录，存放Hadoop的配置文件；

3.lib目录：存放Hadoop的本地库（对数据进行压缩解压缩功能）；

4.sbin目录：存放启动或停止Hadoop相关服务的脚本；

5.share目录：存放Hadoop的依赖jar包、文档、和官方案例。

将hadoop上传到/opt目录下并解压缩到/usr目录下

修改配置文件

vim /etc/profile
//添加以下内容
export HADOOP_HOME=/usr/hadoop
export HADOOP_CONF_DIR=/usr/hadoop/etc/hadoop
PATH=$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$PATH
//保存配置
source /etc/profile

编辑hadoop/etc/hadoop/hadoop-env.sh文件，修改JAVA_HOME值对应到jdk安装目录