摘要：
理解NameNode的工作机制尤其是元数据管理机制，以增强对HDFS工作原理的理解，及培养hadoop集群运营中“性能调优” “NameNode”故障问题的分析解决能力 1.NameNode职责： Hadoop集群中有两种节点，一种是NameNode，还有一种是DataNode；其中DataNode 阅读全文
摘要：
1.HDFS的工作机制： 2.HDFS的写数据流程： 2.1.概述 客户端要向HDFS写数据，首先跟Namenode通信以确认可以写文件并获得接收文件block的datanode(切块在客户端进行)， 然后客户端按顺序将文件逐个block传递给相应datanode，并由接收到block的datano 阅读全文
摘要：
通过Java API来访问HDFS 1.Windows上配置环境变量 解压Hadoop，然后把Hadoop的根目录配置到HADOOP_HOME环境变量里面 然后把HADOOP_HOME/lib和HADOOP_HOME/bin配置到path里面 2.替换bin目录 将官网下载的Hadoop目录下面的b 阅读全文
摘要：
1.HDFS的概念和特性 1.1. 首先，它是一个文件系统，用于存储文件，通过统一的命名空间——目录树来定位文件 1.2. 它是分布式的，由很多服务器联合起来实现其功能，集群中的服务器有各自的角色；重要特性如下： （1）HDFS中的文件在物理上是分块存储（block），块的大小可以通过配置参数( d 阅读全文