摘要: 背景介绍 为了要解决数据孤岛的问题 (Data Silos),我们需要建立一个集中式的数据湖,更进一步在上面满足各式各样的数据分析与机器学习相关的需求。而构建数据湖的通常可以分成以下几个步骤,设定 Amazon S3 作为数据湖。然后开始摄取数据到 Amazon S3,开始处理并产生数据的元数据,有 阅读全文
posted @ 2022-05-22 10:20 亚马逊云开发者 阅读(75) 评论(0) 推荐(0) 编辑
摘要: 活动简介 从“数据”到“大数据”,不仅仅是数量上的差别,更是数据质量的提升。 传统意义上的数据处理方式包括数据挖掘,数据仓库联机分析处理(OLAP)等,而在“大数据时代”,数据已经不仅仅是需要分析处理的内容,更重要的是人们需要借助专用的思想和手段从大量看似杂乱繁复的数据中,收集整理和分析数据足迹,以 阅读全文
posted @ 2022-05-22 10:09 亚马逊云开发者 阅读(81) 评论(0) 推荐(0) 编辑
摘要: 前言 今年2月,Amazon CodePipeline 已经由光环新网运营的中国(北京)区域和由西云数据运营的中国(宁夏)区域提供。 Amazon CodePipeline 是一项完全托管式持续交付服务,可帮助对您的发布管道进行自动化,以实现快速而可靠的应用程序及基础设施更新。每当有代码变更时,Am 阅读全文
posted @ 2022-05-22 09:57 亚马逊云开发者 阅读(41) 评论(0) 推荐(0) 编辑
摘要: 原来 Amazon Karpenter 是亚马逊云科技 2021 re:Invent 大会上正式发布的针对 Kubernetes 集群一直以来不断扩展的组件中。在 Kubernetes 集群中的组件可以针对 Unscheduleable Pod 的需求,自动创建节点的新节点并加入。由于在Kubern 阅读全文
posted @ 2022-05-22 09:41 亚马逊云开发者 阅读(182) 评论(0) 推荐(0) 编辑