摘要: 一、HDFS 架构 Hadoop 主要由HDFS(Hadoop Distributed File System)和MapReduce 引擎两部分组成。最底部是HDFS,它存储Hadoop 集群中所有存储节点上的文件。 HDFS 可以执行的操作有创建、删除、移动或重命名文件等,架构类似于传统的分级文件 阅读全文
posted @ 2020-03-21 21:25 飞末 阅读(972) 评论(0) 推荐(0) 编辑
摘要: 一、简介 HDFS(Hadoop Distributed File System)是GFS的开源实现。 1.优点: 能够运行在廉价机器上,硬件出错常态,需要具备高容错性 流式数据访问,而不是随机读写 面向大规模数据集,能够进行批处理、能够横向扩展 简单一致性模型,假定文件是一次写入、多次读取 2.缺 阅读全文
posted @ 2020-03-21 20:10 飞末 阅读(7244) 评论(0) 推荐(0) 编辑