数据库:Hadoop实验
Hadoop实验
-
先单机下载、安装hadoop,启动:
bin/hdfs namenode -format sbin/start-all.sh
-
腾讯云新建三个机器,分别在两地(香港二区、香港三区),分别命名为master、slave1、slave2。
-
修改四个配置文件
运行hadoop:
分别查看三台机器运行状态:
查看HDFS运行状态:
通过hdfs创建czy文件夹、上传文件
bin/hdfs dfs -mkdir -p /user/ubuntu
bin/hdfs dfs -mkdir czy
bin/hdfs dfs -put ./etc/hadoop/core-site.xml czy
通过dfs将测试文件上传,查看该文件:
ps:每次重启hadoop,需要把/usr/local/hadoop/tmp/dfs/data下的所有内容删掉,因为hadoop不会自己覆盖而是报错