随笔分类 - Hadoop

分布式数据库 HBase

摘要：HBase – Hadoop Database，是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。 HBase是Google Bigtable的开源实现，类似Google Bigtable利用GFS作为其文件存储系统，HBase利用Hadoop HDFS作为其文件存储系统；Google运行MapReduce来处理Bigtable中的海量数据，HBase同样利用Hadoop MapReduce来处理HBase中的海量数据；Google Bigtable利用 Chubby作为协同服务，HBase利用Zookeeper作为对应。阅读全文

posted @ 2015-07-09 21:50 zero516cn 阅读(495) 评论(0) 推荐(0) 编辑

Sqoop-1.4.6.bin__hadoop-2.0.4-alpha 环境搭建

摘要：Sqoop-1.4.6.bin__hadoop-2.0.4-alpha 环境搭建阅读全文

posted @ 2015-07-08 17:11 zero516cn 阅读(2108) 评论(1) 推荐(0) 编辑

Sqoop2 环境搭建

摘要：Sqoop2 环境搭建阅读全文

posted @ 2015-07-08 14:33 zero516cn 阅读(5900) 评论(0) 推荐(0) 编辑

淘宝TFS分布式文件系统内部实现

摘要：淘宝TFS分布式文件系统内部实现阅读全文

posted @ 2015-07-07 17:30 zero516cn 阅读(1842) 评论(0) 推荐(0) 编辑

Hadoop HDFS 架构设计

摘要：HDFS是一个具有高度容错性的分布式文件系统，适合部署在廉价的机器上，它具有以下几个特点： 1）适合存储非常大的文件 2）适合流式数据读取，即适合“只写一次，读多次”的数据处理模式 3）适合部署在廉价的机器上阅读全文