CDH - [01] 概述

 

 

一、什么是CDH

  CDH是Cloudera's Distribution Including Apache Hadoop的缩写,即Cloudera公司发布的Hadoop发行版。它是一个为Hadoop构建的企业级数据平台,提供了Hadoop核心组件的预编译、测试和优化的版本,以及管理这些组件的工具和附加功能。Cloudera提供了易于安装、配置和管理的Hadoop解决方案,使得企业能够更轻松地集成和使用Hadoop进行大数据分析和处理。集成了Zookeeper、HDFS、Yarn...等大数据服务。

 

二、为什么使用CDH

  • 原生Hadoop版本很多,兼容性需要自己调研,成本高。
  • 缺乏边界的管理工具或者平台,运维效率低,成本高。
  • Hadoop相关组件发行商也比较多。
  • CDH比较友好,使用者多

 

二、CDH和TDH的区别?

共同点:

  1、两者都是基于Apache Hadoop开发的大数据集成平台,集成了大数据各个服务

  2、都有manager节点对集群agent节点的大数据服务进行可视化监控,并可以对集群节点进行可视化扩容缩容操作。

不同点:

  1、Cloudera作为Hadoop领域的领先企业,拥有广泛的社区和强大的技术支持。提供有免费版CDH以供下载安装使用,在某种程度上,能够有利于对市场的推广。毕竟在当下,IT领域的开源是很重要的,有前人开拓,有后人继往开来,才能让IT技术与时俱进。

  2、TDH(Transwarp Data Hub)依赖于其背后的公司进行支持,并且TDH只有短暂的试用期,后续使用需要联系其厂商,购买相关许可证。并且其并没有广泛的社区,客户在遇到问题时,还是需要联系厂商以提供对应的技术支持以及维护。

 

 

三、CM的作用?

 CM是Cloudera Manager的缩写,它是Cloudera提供的用于管理Hadoop集群的工具。

 CM的主要作用包括:

 1、集群部署和配置

  通过CM,用户可以更轻松地部署和配置Hadoop集群,包括添加或删除节点、配置组件参数等。

2、监控和诊断

  CM提供了强大的监控功能,可以实时查看集群的运行状态、性能指标等。同时,它还提供了诊断工具,帮助用户快速定位和解决问题。

 3、安全和管理

  CM支持多种安全特性,如Kerberos认证、访问控制等,确保集群的安全性。此外,它还提供了集群管理的功能,如资源调度、作业管理等。

 

四、CDH相对开源的Hadoop,有哪些差异?

1、易用性和管理性:CDH提供了预编译、测试和优化的Hadoop组件版本,以及强大的管理工具(如CM),使得用户可以更轻松地安装、配置和管理Hadoop集群。而开源的Hadoop则需要用户自行处理这些繁琐的工作。

2、稳定性和可靠性:Cloudera对Hadoop组件进行了深入的测试和优化,以确保CDH的稳定性和可靠性。这有助于减少用户在生产环境中可能遇到的问题。

3、安全性和合规性:CDH可能包含更多的安全特性和合规性支持,以满足企业级应用的需求。这些特性可能包括Kerberos认证、审计日志、数据加密等。

4、支持和维护:作为商业产品,CDH提供了专业的技术支持和维护服务,可以帮助用户解决在使用过程中遇到的问题。而开源的Hadoop则主要依赖于社区的支持。

 

 

 

— 要养成终生学习的习惯 —

posted @ 2024-03-14 17:33  HOUHUILIN  阅读(95)  评论(0编辑  收藏  举报