摘要: 一、背景与痛点 在 2017 年上半年以前,TalkingData 的 App Analytics 和 Game Analytics 两个产品,流式框架使用的是自研的 td-etl-framework。该框架降低了开发流式任务的复杂度,对于不同的任务只需要实现一个 changer 链即可,并且支持水 阅读全文
posted @ 2019-11-15 17:05 zhaowei121 阅读(273) 评论(0) 推荐(0) 编辑
摘要: 本文由趣头条实时平台负责人席建刚分享趣头条实时平台的建设,整理者叶里君。文章将从平台的架构、Flink 现状,Flink 应用以及未来计划四部分分享。 一.平台架构 1.Flink 应用时间线 首先是平台的架构,2018 年 3 月之前基本都是基于 Storm 和 Spark Streaming 来 阅读全文
posted @ 2019-11-15 16:17 zhaowei121 阅读(389) 评论(0) 推荐(0) 编辑
摘要: 本文根据 Apache Flink 系列直播整理而成,由 Apache Flink Contributor、OPPO 大数据平台研发负责人张俊老师分享。主要内容如下: 网络流控的概念与背景 TCP的流控机制 Flink TCP-based 反压机制(before V1.5) Flink Credit 阅读全文
posted @ 2019-11-15 15:46 zhaowei121 阅读(351) 评论(0) 推荐(0) 编辑
摘要: 众所周知,Apache Flink(以下简称 Flink)最早诞生于欧洲,2014 年由其创始团队捐赠给 Apache 基金会。如同其他诞生之初的项目,它新鲜,它开源,它适应了快速转的世界中更重视的速度与灵活性。 大数据时代对人类的数据驾驭能力提出了新的挑战,Flink 的诞生为企业用户获得更为快速 阅读全文
posted @ 2019-11-15 15:14 zhaowei121 阅读(256) 评论(0) 推荐(0) 编辑
摘要: 本文根据 Apache Flink 系列直播课程整理而成,由 Apache Flink Contributor、网易云音乐实时计算平台研发工程师岳猛分享。主要分享内容为 Flink Job 执行作业的流程,文章将从两个方面进行分享:一是如何从 Program 到物理执行计划,二是生成物理执行计划后该 阅读全文
posted @ 2019-11-15 14:29 zhaowei121 阅读(770) 评论(0) 推荐(0) 编辑