Hadoop生态系统

Hadoop1.0最新稳定版本1.2.1

1.Hadoop Common

2.分布式文件系统HDFS

3.分布式并行计算框架MapReduce

Hadoop2.0稳定版本2.2.0

1.Hadoop Common

2.分布式文件系统HDFS

3.分布式并行计算框架MapReduce

4.YARN

 

                            Hadoop 2.x生态系统

                   Ambari安装、部署、配置和管理工具

Zookeeper分布式协助服务   Hive数据仓库  pig数据流处理 Mahout数据挖掘库

Hbase实时分布式数据库 MapReduce分布式离线计算框架  Storm流式计算框架  Spark基于内存计算框架 Spark基于内存计算框架 

　　　　　　　　YARN集群资源管理系统

                       HDFS2分布式文件系统

sqoop数据库ELT工具 Flume日志收集工具