02 环境搭建

1.安装虚拟机

下载 01 VirtualBox-6.1.16-140961-Win.exe，并安装完成。

 

2.安装Linux操作系统

下载02 ubuntukylin-16.04-desktop-amd64.iso，并完成安装。

在线安装教程http://dblab.xmu.edu.cn/blog/337-2/

网盘：02_01 在Windows中使用VirtualBox安装Ubuntu_20210914_152546.pptx

3.安装关系型数据库MySQL

网盘：02_02 安装关系型数据库MySQL.pptx

 

4.安装大数据处理框架Hadoop

安装FileZilla_3.55.1_win64-setup.exe

查看IP:ifconfig

windows连接ubuntu

hadoop-2.7.1.tar.gz上传到~/下。

 

在线安装指南：http://dblab.xmu.edu.cn/blog/2441-2/

网盘：02 03 hadoop 安装.pptx 

用到的代码：https://www.cnblogs.com/MissDu/p/8831525.html ，在ubuntu中用浏览器打开，可复制命令。

1. 创建Hadoop用户
2. SSH登录权限设置
3. 安装Java环境
4. 单机安装配置
   • 下载、解压、
   • 修改文件夹名与权限即可使用
   • 查看hadoop版本
5. 伪分布式安装配置
   • 配置文件

创建Hadoop用户

 

 

 

 

 SSH登录权限设置

 

 

 

 

 

 

 

 

 

 

 

 安装Java环境

 

 

 

 

 

 

 单机安装配置

• 下载、解压
• 

   

   

• 修改文件夹名与权限即可使用

 

 

 

 

• 查看hadoop版本

 

 

 伪分布式安装配置

 

 

 

 

 

 

 配置文件

 

 

 

 执行 NameNode 的格式化

 

 

• 开启hfds守护进程，查看进程

• 

• 关闭hdfs，查看进程

 　　

 

 

5.安装列族数据库HBase

6.安装数据仓库Hive

7.安装Sqoop

8.安装R

9.安装Eclipse