字节跳动数据平台

摘要： 更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 基于火山引擎分布式治理的理念，数据平台数据治理团队自研了火山引擎DataLeap SLA保障平台，目前已在字节内部得到广泛使用，并支持了绝大部分数据团队的SLA治理需求，每天保障的SLA链路数量过千，解决了数据SL 阅读全文

摘要： 更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 关键技术 构建一个好的Data Catalog系统，需要考虑的核心产品设计和技术设计有很多。篇幅所限，本文只概要介绍技术设计中最核心重要的部分，更多细节展开可参照后续的文章。 数据模型统一 将不同元数据的数据模型统 阅读全文

摘要： 前言 对于分析型数据库产品，通过增加服务节点实现集群水平扩容，并提升集群性能和容量，是运维的必要手段。 但是对于熟悉 ClickHouse 的工程师而言，听到“扩容”二字一定会头疼不已。开源 ClickHouse 的 MPP 架构导致扩容成本高，已是 ClickHouse 运维的核心痛点。 主要体现 阅读全文

摘要： “北京汽车正在为车企数字化升级跑出一条新通路。” 汽车行业的竞争向来激烈，随着数字化浪潮的持续推进，特别是一大批互联网背景的人物和企业入场，各大车企加速在数据智能应用上发力，以打破如今“用户越来越懂车，但车企却越来越难懂用户”的市场僵局。 作为国内领先的车企之一，北京汽车对此早有感知，并积极拥抱变化 阅读全文

摘要： 技术与产品概览 架构设计 元数据的接入 元数据接入支持T+1和近实时两种方式 上游系统：包括各类存储系统（比如Hive、 Clickhouse等）和业务系统（比如数据开发平台、数据质量平台等） 中间层： ETL Bridge：T+1方式运行，通常是从外部系统拉取最新元数据，与当前Catalog系统的 阅读全文

摘要： 更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 摘要 Data Catalog 产品，通过汇总技术和业务元数据，解决大数据生产者组织梳理数据、数据消费者找数和理解数的业务场景，并服务于数据开发和数据治理的产品体系。本文介绍了火山引擎 DataLeap 套件下Da 阅读全文

摘要： 7月6日，火山引擎数智平台（VeDI）《全链路增长：数据飞轮转动消费新生力》主题活动在北京举办，会上分享了行业、企业、产品视角下的数据飞轮实践，并针对消费行业提出业务应用“四更”新主张：“更懂业务”、“更会决策”、“更准触达”和“更快行动”。 数据飞轮，是火山引擎基于字节跳动10年数据驱动理念沉淀而 阅读全文

摘要： 更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 数字技术的发展让智能电视普及率大幅提升，2023年智能电视的市场渗透率已超90%，与智能电视相匹配的各类应用APP功能也愈加丰富。本文介绍面向智能电视及机顶盒的互联网电视应用——鲜时光APP的改版案例。鲜时光引入智 阅读全文

摘要： 更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 近日，火山引擎数智平台VeDI直播活动「超话数据」在线举办，来自火山引擎的产品及解决方案专家分享了以ByteHouse为代表的云数仓产品在字节跳动的演进过程、关键技术以及最佳实践，并通过五个步骤拆解，带领开发者快速 阅读全文

摘要： 更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 最佳实践 前面介绍了DataLeap数据质量平台的一些实现方式，下面为大家介绍一些我们在数据量和资源这两个方面的最佳实践。 表行数信息-优先 HMS 获取 内部的离线监控中，表行数的监控占比非常大，可能至少 50% 阅读全文