实验三HDFS 常用操作

HDFS 常用操作
使用 hadoop 用户名登录进入 Linux 系统,启动 Hadoop,参照相关 Hadoop 书籍或网络
资料,或者也可以参考本教程官网的“实验指南”栏目的“HDFS 操作常用 Shell 命令”,
使用 Hadoop 提供的 Shell 命令完成如下操作:
(1) 启动 Hadoop,在 HDFS 中创建用户目录“/user/hadoop”;
(2) 在 Linux 系统的本地文件系统的“/home/hadoop”目录下新建一个文本文件
test.txt,并在该文件中随便输入一些内容,然后上传到 HDFS 的“/user/hadoop”
目录下;
(3) 把 HDFS 中“/user/hadoop”目录下的 test.txt 文件,下载到 Linux 系统的本地文
件系统中的“/home/hadoop/下载”目录下;
(4) 将HDFS中“/user/hadoop”目录下的test.txt文件的内容输出到终端中进行显示;
(5) 在 HDFS 中的“/user/hadoop”目录下,创建子目录 input,把 HDFS 中
“/user/hadoop”目录下的 test.txt 文件,复制到“/user/hadoop/input”目录下;
(6) 删除HDFS中“/user/hadoop”目录下的test.txt文件,删除HDFS中“/user/hadoop”
目录下的 input 子目录及其子目录下的所有内容


(1) 启动Hadoop,在HDFS中创建用户目录"/user/hadoop":
start-dfs.sh
hdfs dfs -mkdir /user/hadoop

(2) 在Linux系统的本地文件系统的"/home/hadoop"目录下新建一个文本文件test.txt,并上传到HDFS的"/user/hadoop"目录下:
echo "Some content" > /home/hadoop/test.txt
hdfs dfs -copyFromLocal /home/hadoop/test.txt /user/hadoop/

(3) 将HDFS中"/user/hadoop"目录下的test.txt文件下载到Linux系统的本地文件系统中的"/home/hadoop/下载"目录下:
hdfs dfs -copyToLocal /user/hadoop/test.txt /home/hadoop/下载/

(4) 将HDFS中"/user/hadoop"目录下的test.txt文件的内容输出到终端中进行显示:
hdfs dfs -cat /user/hadoop/test.txt

(5) 在HDFS中的"/user/hadoop"目录下,创建子目录input,将HDFS中"/user/hadoop"目录下的test.txt文件复制到"/user/hadoop/input"目录下:
hdfs dfs -mkdir /user/hadoop/input
hdfs dfs -cp /user/hadoop/test.txt /user/hadoop/input/

(6) 删除HDFS中"/user/hadoop"目录下的test.txt文件,删除HDFS中"/user/hadoop"目录下的input子目录及其子目录下的所有内容:
hdfs dfs -rm /user/hadoop/test.txt
hdfs dfs -rm -r /user/hadoop/input

 

posted @ 2024-01-15 21:14  STDU_DREAM  阅读(25)  评论(0编辑  收藏  举报