本周每天学习一个小时hdfs,web设计
hdfs和linux的操作主要用到命令窗口,大量陌生的命令操作是学习的一大难点
主要学习了:
hdfs的目录操作
cd /usr/local/hadoop
./bin/hdfs dfs -mkdir -p /user/hadoop
在HDFS中创建一个“/user/hadoop”目录,“–mkdir”是创建目录的操作,“-p”表示如果是多级目录,则父目录和子目录一起创建,这里“/user/hadoop”就是一个多级目录,因此必须使用参数“-p”,否则会出错。
./bin/hdfs dfs -ls .
“-ls”表示列出HDFS某个目录下的所有内容,“.”表示HDFS中的当前用户目录
./bin/hdfs dfs -ls
列出HDFS上的所有目录
./bin/hdfs dfs -mkdir /input
创建input目录
./bin/hdfs dfs -rm -r /input
删除input目录
./bin/hdfs dfs -put /home/hadoop/myLocalFile.txt input
把本地文件系统的“/home/hadoop/myLocalFile.txt”上传到HDFS中的当前用户目录的input目录下
./bin/hdfs dfs -cat input/myLocalFile.txt
查看HDFS中的myLocalFile.txt这个文件的内容
http://localhost:9870访问HDFS的web管理界面
Linux下的Java编程(除了虚拟机不太习惯以外,跟平时编程没什么区别)
Java对hadoop进行管理,需要在工程中添加hadoop里的Jar包(/usr/local/hadoop/share/hadoop/common)
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· Ollama——大语言模型本地部署的极速利器
· 使用C#创建一个MCP客户端
· 分享一个免费、快速、无限量使用的满血 DeepSeek R1 模型,支持深度思考和联网搜索!
· ollama系列1:轻松3步本地部署deepseek,普通电脑可用
· 按钮权限的设计及实现