摘要：
下面我贴出几张图，这些图都是我在百度图片里找到的比较好的图片： 图片一： 图片二： 图片三： 图片四： 图片五： 图片六： 我现在学习技术很喜欢看图，每次有了新理解就会去看看图，每次都会有新的发现。 谈mapreduce运行机制，可以从很多不同的角度来描述，比如说从mapreduce运行流程来讲解， 阅读全文
摘要：
一.Hdfs简介 hdfs是一个文件系统，用于存储文件，通过统一的命名空间——目录树来定位文件,并且是分布式的，由很多服务器联合起来实现其功能，集群中的服务器各自负责角色； 重要特征： 1.HDFS中的文件在物理上是分块存储（block），块的大小可以通过配置参数( dfs.blocksize)来规 阅读全文
摘要：
Hadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件(commodity hardware)上的分布式文件系统。它和现有的分布式文件系统有很多共同点。但同时，它和其他的分布式文件系统的区别也是很明显的。HDFS是一个高度容错性的系统，适合部署在廉价的机器上。HDFS能提供高吞吐量的数据访 阅读全文
摘要：
为什么我们需要HDFS 文件系统由三部分组成：与文件管理有关软件、被管理文件以及实施文件管理所需数据结构。 既然读取一块磁盘的所有数据需要很长时间，写入更是需要更长时间（写入时间一般是读取时间的3倍）。我们需要一个巨大文件难道得换传输速度10GB/S的磁盘（现在没有这样的磁盘），而且即使有文件为1Z 阅读全文