摘要: hdfs上的文件是以块为单位进行存储的 大小一般设置为128m,不能太小,也不能太大。 详细情况看以下链接 hdfs块大小设置原因 hdfs的写数据流程 (1)客户端向 NameNode 请求上传文件,NameNode 检查目标文件是否已存在,父目录是否存在。 (2)NameNode 返回是否可以上 阅读全文
posted @ 2022-05-21 20:52 习惯了蓝 阅读(301) 评论(0) 推荐(0) 编辑
摘要: hdfs组成架构有四个组件,分别是namenode,datanode,secondary namenode。 NameNode(nn):就是Master,它 是一个主管、管理者。 (1)管理HDFS的名称空间; (2)配置副本策略; (3)管理数据块(Block)映射信息; (4)处理客户端读写请求 阅读全文
posted @ 2022-05-21 19:41 习惯了蓝 阅读(206) 评论(0) 推荐(0) 编辑