摘要: 一:基本语法 bin/hadoop fs + 命令 bin/hadoop dfs + 命令 fs和dfs执行的是同一个类,所以用谁都一样 二:常用命令 阅读全文
posted @ 2020-03-13 21:31 拔丝小红薯 阅读(322) 评论(0) 推荐(0) 编辑
摘要: 一:HDFS是什么? HDFS是分布式文件管理系统的一种,可以通过它管理多台机器上的文件。 简单地说,它是一个文件系统,通过目录树来定位文件,其次,它是分布式的,它把数据存储在多台机器上,实现大量数据的存储。 二:它的优点 (1)高容错性:每台机器上的数据都有多个备份,正在使用的数据出问题,可以由备 阅读全文
posted @ 2020-03-13 21:23 拔丝小红薯 阅读(430) 评论(0) 推荐(0) 编辑
摘要: 3.3.1 HDFS文件上传 3.3.2 HDFS文件下载 3.3.3 定位文件读取 4.1 HDFS写数据流程 (1)客户端通过Distributed FileSystem模块向NamNode节点请求上传文件,NameNode检查目标文件是否存在,父目录是否存在 (2)NamNode返回是否可以上 阅读全文
posted @ 2020-03-13 20:15 拔丝小红薯 阅读(141) 评论(0) 推荐(0) 编辑