随笔分类 -  hadoop

Hadoop文件系统接口
摘要：Hadoop有一个抽象文件系统的概念，hdfs只是其中的一个实现，Java抽象类org.apache.hadoop.fs.FileSystem定义了hadoop中的一个文件系统接口，hdfs是实现了这个接口的一个文件系统，还有其它的文件系统实现，例如使用了本地磁盘文件系统的Local文件系统和R... 阅读全文
posted @ 2015-11-16 22:18 libs5510 阅读(1114) 评论(0) 推荐(0)
hadoop文件系统简介
摘要：Hadoop文件系统简介Hadoop家族中，最重要的两部分内容就是MapReduce和HDFS，其中MapReduce是一种编程范型，这种范型比较适合用来在分布式环境下进行批处理计算。另一部分就是HDFS，即hadoop分布式文件系统。Hadoop环境下可以兼容多种文件系统，包括本地文件系统，体现在... 阅读全文
posted @ 2015-11-06 09:59 libs5510 阅读(355) 评论(0) 推荐(0)