LEAP——联想公司的大数据平台LEAP
联想公司的大数据平台LEAP(Lenovo Enterprise Analytics Platform)是一个高性能的一站式分析平台,专注于处理企业级大数据场景。该平台起始于2011年,联想大数据团队经过持续投入,已实现对联想集团全球化管理和生产与运营体系的全方位支撑。
LEAP平台具有使用简便、运行高效、易于扩展、安全可靠等特点,它能够帮助企业快速实现内部数据和外部数据的融合,为企业带来极佳的数据计算与分析挖掘能力。
该平台主要由:
大数据计算平台、
数据能力开放平台、——通过数据能力开放平台,该平台整合了大数据平台的基础能力和数据深度挖掘能力,为企业内外部用户实现数据共享、开发大数据分析应用提供了良好的生态环境。
数据资产管理平台、——数据资产管理平台则实现了数据标准管理、数据安全管理、数据质量管理等能力。
数据采集转换套件、
数据应用套件、
系统运维监控中心
等六大产品线组成。
具体来说,LEAP平台不仅提供多样的数据采集能力,同时还具备海量数据存储能力和多种高性能计算引擎。
此外,LEAP平台在多个领域都有广泛的应用,包括个人消费、智能城市建设、医疗健康以及企业管理等。例如,联想可以通过分析大量的医疗数据,提供个性化的健康管理建议;通过分析大量的企业数据,帮助企业更好地了解市场需求,优化产品和服务。
总的来说,联想大数据LEAP平台是一个功能强大、应用广泛的企业级大数据处理平台,为企业提供了全面的大数据解决方案。
详细介绍一下联想LEAP平台的六大产品线及其具体功能:
-
大数据计算平台(Descartes):
- 基于Hadoop生态系统,该平台对复杂开源技术进行了高度集成和性能优化,面向基础设施层进行了深度调优。
- 在分布式存储系统的基础上,建立了统一资源调度管理,能够高效地支持大规模批处理、交互式查询计算、流式计算等多种计算引擎。
- 该平台为企业级分析提供最佳性能和高稳定性的大数据计算环境。
- 大数据计算平台Descartes作为LEAP平台的核心产品线之一,基于 Hadoop生态系统,引入了多种核心功能和组件,对复杂开源技术进行高度 集成和性能优化,面向基础设施层进行深度调优。在分布式存储系统的基 础上, 建立了统一资源调度管理,高效地支持大规模批处理、交互式查询计 算、流式计算等多种计算引擎。Descartes平台为企业级分析提供最佳性能和高稳定性的大数据计算环境。
-
数据能力开放平台(Gauss):
- 该平台整合了大数据平台的基础能力和数据深度挖掘能力,为内外部客户提供灵活的资源调度、数据共享、数据挖掘能力。
- 包括资源开放、数据工厂和分析武库等模块,实现Capability as a Service(能力即服务)。
- 资源开放模块包括资源调度、任务调度、访问控制、多租户管理等。
- 数据工厂模块包括共享数据加工等功能。
- 整合大数据平台的基础能力和数据深度挖掘能力,通过资源开放、数据工厂和分析武库等模块为内外部客户提供灵活的资源调度、数据共享、数据挖掘能力。资源开放包括资源调度、任务调度、访问控制、多租户管理等,实现Capability as a Service。数据工厂包括共享数据加工、 数据封装、数据目录服务、数据服务接口等,实现Data as a Service。分析武库集成了丰富的数据挖掘算法,并进行了优化,极大提升了算法的运算 效率,实现Analysis as a Service。
-
数据资产管理平台(Euler):
- 该平台实现了数据标准管理、数据安全管理、数据质量管理等能力。
- 通过对数据资产的全面管理,确保数据的准确性、一致性和安全性。
- 将数据对象作为一种全新的资产形态,围绕数据资产本身建立一个可 靠可信的管理机制,提供数据标准管理、数据资产管理、元数据管理、数 据质量管理、数据安全等, 以实现数据的可管、可控、可视,为实现数据价 值增值奠定良好基础。
-
数据采集转换套件(Euclid):
- 该套件提供多样的数据采集能力,能够收集来自不同源的数据,如数据库、文件、API等。
- 同时,它还提供数据转换功能,将收集到的原始数据转换为可用于分析的格式。
- 数据采集转换套件Euclid作为LEAP平台的重要产品线之一,支持多种结构化和非结构化数据的灵活集成。提供支持不同系统和设备的开发工具套件,能够根据企业的需求方便地快速扩展,为企业快速收集其信息系统之外的设备、用户和社交数据。同时,LEAP平台也提供网络爬虫模块, 以方便企业获取外部网络数据。
-
数据应用套件(Nash):
- 该套件包含一系列工具和应用,支持数据分析、数据挖掘、数据可视化等任务。
- 用户可以利用这些工具和应用,构建自己的大数据分析应用,以满足特定的业务需求。
- 为内外部客户查询分析、开发使用而提供多样的、便于操作的应用工具集,包括: 数据可视化报表工具、可视化高级分析、业务应用APP、等几大类应用工具,同时集成其他第三方工具等,为分析用户提供一站式、可视化、低门槛、高价值的应用工具,实现Application as a Service。
-
系统运维监控中心(Architon):
- 该中心提供对大数据平台集群的集中管理、监控和告警功能。
- 可以实现对大数据平台集群的安装部署、监控告警及日常管理,确保平台的稳定运行。
- 系统运维监控中心Architon作为LEAP平台的基础产品线之一,能快速完成产品套件的安装部署、节点监控、访问权限管理、资源配额管理、系统告警分析、升级扩容等计算平台维护工作,通过统一界面实现对 LEAP分析平台及运行状况的易用、易管理。
总的来说,联想LEAP平台的六大产品线覆盖了大数据处理的各个环节,从数据采集、存储、计算到应用、管理和监控,为企业提供了一个全面、高效、稳定的大数据解决方案。
官网:https://dibg.lenovo.com.cn/software/jcptrj/leaphd.html