摘要: DateNode工作机制 详细流程 一个数据块在datanode上以文件形式存储在磁盘上,包括两个文件,一个是数据本身,一个是元数据包括数据块的长度,块数据的校验和,以及时间戳。 DataNode启动后向namenode注册,通过后,周期性(1小时)的向namenode上报所有的块信息。 心跳是每3 阅读全文
posted @ 2021-07-30 22:56 张涨涨 阅读(236) 评论(0) 推荐(0) 编辑
摘要: hadoop分布式文件存储系统,用来解决海量数据的存储问题 HDFS的组成 核心配置文件:hdfs-site.xml、core-site.xml NameNode:负责整个HDFS集群的管理(比如监控DataNode的运行状态、调度DataNode去处理数据);存储元数据(包含数据的基本信息,有两个 阅读全文
posted @ 2021-07-30 22:38 张涨涨 阅读(156) 评论(0) 推荐(0) 编辑
Live2D