本周每天学习一个小时hdfs,web设计
hdfs和linux的操作主要用到命令窗口,大量陌生的命令操作是学习的一大难点
主要学习了:
hdfs的目录操作
cd /usr/local/hadoop
./bin/hdfs dfs -mkdir -p /user/hadoop
在HDFS中创建一个“/user/hadoop”目录,“–mkdir”是创建目录的操作,“-p”表示如果是多级目录,则父目录和子目录一起创建,这里“/user/hadoop”就是一个多级目录,因此必须使用参数“-p”,否则会出错。
./bin/hdfs dfs -ls .
“-ls”表示列出HDFS某个目录下的所有内容,“.”表示HDFS中的当前用户目录
./bin/hdfs dfs -ls
列出HDFS上的所有目录
./bin/hdfs dfs -mkdir /input
创建input目录
./bin/hdfs dfs -rm -r /input
删除input目录
./bin/hdfs dfs -put /home/hadoop/myLocalFile.txt input
把本地文件系统的“/home/hadoop/myLocalFile.txt”上传到HDFS中的当前用户目录的input目录下
./bin/hdfs dfs -cat input/myLocalFile.txt
查看HDFS中的myLocalFile.txt这个文件的内容
http://localhost:9870访问HDFS的web管理界面
Linux下的Java编程(除了虚拟机不太习惯以外,跟平时编程没什么区别)
Java对hadoop进行管理,需要在工程中添加hadoop里的Jar包(/usr/local/hadoop/share/hadoop/common)