06 2022 档案

摘要:一、datanode之间的数据平衡 1.1、介绍 ​ Hadoop 分布式文件系统(Hadoop Distributed FilSystem),简称 HDFS,被设计成适合运行在通用硬件上的分布式文件系统。它和现有的分布式文件系统有很多的共同点。HDFS 是一个高容错性的文件系统,提供高吞吐量的数据 阅读全文
posted @ 2022-06-30 19:44 一寸HUI 阅读(3656) 评论(2) 推荐(0) 编辑
摘要:一、磁盘选择策略 1.1、介绍 在HDFS中,所有的数据都是存在各个DataNode上的.而这些DataNode上的数据都是存放于节点机器上的各个目录中的,而一般每个目录我们会对应到1个独立的盘,以便我们把机器的存储空间基本用上.这么多的节点,这么多块盘,HDFS在进行写操作时如何进行有效的磁盘选择 阅读全文
posted @ 2022-06-29 20:07 一寸HUI 阅读(1582) 评论(0) 推荐(1) 编辑