第二次作业
1.了解对比Hadoop不同版本的特性，可以用图表的形式呈现。
|
发行版本 |
功能特点 |
|
DKhadoop发行版 |
DKhadoop发行版：有效的集成了整个HADOOP生态系统的全部组件，并深度优化，重新编译为一个完整的更高性能的大数据通用计算平台，实现了各部件的有机协调。因此DKH相比开源的大数据平台，在计算性能上有了高达5倍(最大)的性能提升。DKhadoop将复杂的大数据集群配置简化至三种节点(主节点、管理节点、计算节点)，极大的简化了集群的管理运维，增强了集群的高可用性、高可维护性、高稳定性。 |
|
cloudera发行版 |
Cloudera发行版：CDH是Cloudera的hadoop发行版，完全开源，比Apache hadoop在兼容性，安全性，稳定性上有增强。 |
|
hortonworks发行版 |
€Hortonworks发行版：Hortonworks 的主打产品是Hortonworks Data Platform (HDP)，也同样是100%开源的产品，其版本特点：HDP包括稳定版本的Apache Hadoop的所有关键组件;安装方便，HDP包括一个现代化的，直观的用户界面的安装和配置工具 |
|
MAPR发行版 |
MAPR发行版：mapR有免费和商业两个版本，免费版本在功能上有所减少 |
|
华为hadoop发行版 |
华为hadoop发行版：华为的hadoop版本基于自研的Hadoop HA平台，构建NameNode、JobTracker、HiveServer的HA功能，进程故障后系统自动Failover，无需人工干预，这个也是对hadoop的小修补，远不如mapR解决的彻底 |
2.Hadoop生态的组成、每个组件的作用、组件之间的相互关系，以图例加文字描述呈现。
下图为hadoop的生态系统：
3.官网学习Hadoop的安装与使用，用文档的方式列出步骤与注意事项。
下载链接：http://www.apache.org/dyn/closer.cgi/hadoop/common/
支持平台
支持GNU / Linux作为开发和生产平台。Hadoop在具有2000个节点的GNU / Linux集群上得到了证明。
Windows也是受支持的平台，但是以下步骤仅适用于Linux。要在Windows上设置Hadoop。
必备软件
Linux所需的软件包括：
- 必须安装Java™。HadoopJavaVersions中描述了推荐的Java版本。
- 如果要使用可选的启动和停止脚本，则必须安装ssh并且必须运行sshd才能使用管理远程Hadoop守护程序的Hadoop脚本。另外，建议也安装pdsh以便更好地进行ssh资源管理。
前期准备好之后，详细安装步骤：https://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-common/SingleCluster.html#Download
4.评估华为hadoop发行版本的特点与可用性。
华为FusionInsight HD发行版紧随开源社区的最新技术，快速集成最新组件，并在可靠性、安全性、管理性等方面做企业级的增强，持续改进，持续保持技术领先。FusionInsight HD基于开源组件实现功能增强，保持100%的开放性，不使用私有架构和组件。支持安全协议Kerberos，FusionInsight HD使用LDAP作为帐户管理系统，并通过Kerberos对帐户信息进行安全认证。Hive、HBase可以对表、字段加密，集群内部用户信息禁止明文存储。加密算法插件化，可进行扩充，亦可自行开发。非敏感数据可不加密，不影响性能（加密约有5%性能开销）。
