2020年8月23日
大二暑假学习总结04
摘要： 名称 大二暑假学习总结04 所花时间 40h左右 有效代码量 1000行左右 博客量 8篇 收获和目标 收获： shell编程、Zookeeper、Hadoop 的核心之一-HDFS：包括hdfs命令行的使用， 文件的读写，以及API的相关操作 目标： 继续学习Hadoop的另一核心MapReduc 阅读全文
posted @ 2020-08-23 21:43 MoooJL 阅读(101) 评论(0) 推荐(0) 编辑
大数据学习总结12
摘要： 一、HDFS 的 API 操作 导入maven依赖 <dependencies> <dependency> <groupId>org.apache.hadoop</groupId> <artifactId>hadoop-common</artifactId> <version>2.7.5</vers 阅读全文
posted @ 2020-08-23 19:12 MoooJL 阅读(145) 评论(0) 推荐(0) 编辑
大数据学习总结11
摘要： 1、HDFS 文件写入过程 2、HDFS 文件读取过程 3、HDFS 的元数据辅助管理 当 Hadoop 的集群当中, NameNode的所有元数据信息都保存在了 FsImage 与 Eidts 文件当中, 这两个文件就记录了所有的数据的元数据信息 edits edits 存放了客户端最近一段时间的 阅读全文
posted @ 2020-08-23 15:34 MoooJL 阅读(93) 评论(0) 推荐(0) 编辑