数据库:Hadoop实验

Hadoop实验

  1. 先单机下载、安装hadoop,启动:

    bin/hdfs namenode -format
    sbin/start-all.sh
    
image-20230420185642321
  1. 腾讯云新建三个机器,分别在两地(香港二区、香港三区),分别命名为master、slave1、slave2。

  2. 修改四个配置文件

    运行hadoop:

image-20230427185622728

分别查看三台机器运行状态:

image-20230427191104719 image-20230427190323140 image-20230427190345849

查看HDFS运行状态:

image-20230427193451215

通过hdfs创建czy文件夹、上传文件

bin/hdfs dfs -mkdir -p /user/ubuntu
bin/hdfs dfs -mkdir czy
bin/hdfs dfs -put ./etc/hadoop/core-site.xml czy
image-20230427185947058

通过dfs将测试文件上传,查看该文件:

image-20230427194145395

ps:每次重启hadoop,需要把/usr/local/hadoop/tmp/dfs/data下的所有内容删掉,因为hadoop不会自己覆盖而是报错

posted @ 2023-06-10 20:17  丘丘王  阅读(35)  评论(0编辑  收藏  举报
鼠标点击页面特效

尝试在空白处点击鼠标