HDFS文件操作命令手册

HDFS文件操作的基本格式是:

1 bin/hadoop dfs -cmd <args>

1. cat

1 $ hadoop dfs -cat URI [URI …] 
2 #将参数所指示的文件的内容输出到stdout 
3 
4 #example:
5 $ hadoop dfs -cat file:///file2 /user/hadoop/file4

2.cp

1 $ hadoop dfs -cp URI [URI …] <dest>
2 #将文件拷贝到目标路径中。如果 <dest>为目录的话,可以将多个文件拷贝到该目录下
3 
4 #example:
5 $ hadoop dfs -cp /user/hadoop/file1 /user/hadoop/file2 /user/hadoop/dir

3.get

1 $ hadoop dfs -get [-ignorecrc] [-crc] <src><localdst>
2 #将文件拷贝到本地文件系统
3 
4 #example:
5 $ hadoop dfs -get /user/hadoop/file localfile

4.ls

1 $ hadoop dfs -ls <args>
2 #对于一个文件,该命令返回的文件状态以如下格式列出:
3 #文件权限、副本个数、用户ID、组ID、文件大小、最近一次修改日期、最近一次修改时间、文件名
4 #对于一个目录,结果格式:
5 #文件权限,用户ID,组ID,最近一次修改日期,最近一次修改时间,文件名
6 
7 #example:
8 $ hadoop dfs -ls /user/hadoop/file1

 

5.lsr

1 $ hadoop dfs -lsr <args>
2 #在整个目录下递归执行ls

 

6.mkdir

1 $ hadoop dfs -mkdir <paths>
2 #以<paths>中的URI作为参数,创建目录
3 
4 #example:
5 $ hadoop dfs -mkdir /user/hadoop/dir1 /user/hadoop/dir2
View Code

 

7.put

1 $ hadoop dfs -put <localsrc><dst>
2 #将单个的源文件src或者多个源文件从本地文件系统拷贝到目标文件系统中。
3 
4 #example:
5 $ hadoop dfs -put localfile1 localfile2 /user/hadoop/hadoopdir
View Code

 

8.rm

1 $ hadoop dfs -rm [-skipTrash] URI [URI …]
2 #删除参数指定的文件,参数可以有多个。只删除文件和非空目录。如果指定了-skipTrash选项,那么在回收站可用的情况下,跳过回收站而直接将文件删除
3 
4 #example:
5 $ hadoop dfs -rm hdfs://nn.example.com/file /user/hadoop/emptydir
View Code

 

9.rmr

1 $ hadoop dfs -rmr [-skipTrash] URI [URI …]
2 #删除操作的递归版本,即递归删除所有子目录下的文件
3 
4 #example:
5 $ hadoop dfs -rmr /user/hadoop/dir
View Code

 

posted @ 2015-04-08 14:32  江湖小妞  阅读(421)  评论(0编辑  收藏  举报