摘要: 名称 大二暑假学习总结04 所花时间 40h左右 有效代码量 1000行左右 博客量 8篇 收获和目标 收获: shell编程、Zookeeper、Hadoop 的核心之一-HDFS:包括hdfs命令行的使用, 文件的读写,以及API的相关操作 目标: 继续学习Hadoop的另一核心MapReduc 阅读全文
posted @ 2020-08-23 21:43 MoooJL 阅读(100) 评论(0) 推荐(0) 编辑
摘要: 一、HDFS 的 API 操作 导入maven依赖 <dependencies> <dependency> <groupId>org.apache.hadoop</groupId> <artifactId>hadoop-common</artifactId> <version>2.7.5</vers 阅读全文
posted @ 2020-08-23 19:12 MoooJL 阅读(144) 评论(0) 推荐(0) 编辑
摘要: 1、HDFS 文件写入过程 2、HDFS 文件读取过程 3、HDFS 的元数据辅助管理 当 Hadoop 的集群当中, NameNode的所有元数据信息都保存在了 FsImage 与 Eidts 文件当中, 这两个文件就记录了所有的数据的元数据信息 edits edits 存放了客户端最近一段时间的 阅读全文
posted @ 2020-08-23 15:34 MoooJL 阅读(90) 评论(0) 推荐(0) 编辑