随笔分类 -  002_大数据

摘要:【大数据 & AI】Flink Agents 源码解读 (7) AgentsExecutionEnvironment 目录【大数据 & AI】Flink Agents 源码解读 (7) AgentsExecutionEnvironment0x00 概要0x01 基础知识1.1 定义1.2 功能1.3 阅读全文
posted @ 2026-01-15 21:56 罗西的思考 阅读(437) 评论(0) 推荐(0)
摘要:【大数据 & AI】Flink Agents 源码解读 (6) ActionTask 目录【大数据 & AI】Flink Agents 源码解读 (6) ActionTask0x00 概要0x01 基础知识1.1 相关组件1.2 ActionTask1.3 PythonActionTask1.3.1 阅读全文
posted @ 2026-01-12 20:53 罗西的思考 阅读(494) 评论(0) 推荐(0)
摘要:【大数据 & AI】Flink Agents 源码解读 (5) ActionExecutionOperator 目录【大数据 & AI】Flink Agents 源码解读 (5) ActionExecutionOperator0x00 摘要0x01 基础知识1.1 总体架构1.2 定义1.3 关键设 阅读全文
posted @ 2026-01-08 20:41 罗西的思考 阅读(564) 评论(0) 推荐(0)
摘要:【大数据 & AI】Flink Agents 源码解读 (4) AgentPlan 目录【大数据 & AI】Flink Agents 源码解读 (4) AgentPlan0x00 概要0x01 基本概念1.1 定义1.2 在系统中的位置和作用1.3 流程0x02 具体功能2.1 编译2.2 提供数据 阅读全文
posted @ 2026-01-05 20:53 罗西的思考 阅读(560) 评论(0) 推荐(0)
摘要:【大数据 & AI】Flink Agents 源码解读 (3) Agent 目录【大数据 & AI】Flink Agents 源码解读 (3) Agent0x00 概要0x01 核心抽象1.1 Agent抽象1.2 Action 抽象1.3 资源抽象1.4 执行环境抽象1.5 事件抽象1.6 配置抽 阅读全文
posted @ 2025-12-31 19:17 罗西的思考 阅读(740) 评论(0) 推荐(1)
摘要:【大数据 & AI】Flink Agents 源码解读 (2) 核心架构 目录【大数据 & AI】Flink Agents 源码解读 (2) 核心架构0x00 摘要0x01 Flink Agents主要组件1.1 主要组件1.2 内部成员变量映射关系1.2.1 Agent 到 AgentPlan1. 阅读全文
posted @ 2025-12-29 20:24 罗西的思考 阅读(698) 评论(0) 推荐(0)
摘要:【大数据 & AI】Flink Agents 源码解读 (1) 设计 目录【大数据 & AI】Flink Agents 源码解读 (1) 设计0x00 概述0x01 目标1.1 事件驱动的智能体1.2 典型应用场景1.3 事件驱动智能体的技术要求1.4 核心设计理念1.5 事件驱动编排架构1.6 技 阅读全文
posted @ 2025-12-24 20:21 罗西的思考 阅读(743) 评论(0) 推荐(0)
摘要:Alink 是阿里巴巴基于实时计算引擎 Flink 研发的新一代机器学习算法平台,是业界首个同时支持批式算法、流式算法的机器学习平台。本文和上文将带领大家来分析Alink中 聚类评估 的实现。 阅读全文
posted @ 2020-09-26 08:41 罗西的思考 阅读(983) 评论(0) 推荐(0)
摘要:Flink的Slot概念大家应该都听说过,但是可能很多朋友还不甚了解其中细节,比如具体Slot究竟代表什么?在代码中如何实现?Slot在生成执行图、调度、分配资源、部署、执行阶段分别起到什么作用?本文和上文将带领大家一起分析源码,为你揭开Slot背后的机理。 阅读全文
posted @ 2020-09-04 17:00 罗西的思考 阅读(1386) 评论(1) 推荐(2)
摘要:Alink 是阿里巴巴基于实时计算引擎 Flink 研发的新一代机器学习算法平台,是业界首个同时支持批式算法、流式算法的机器学习平台。本文将带领大家来分析 Alink 中 卡方检验 的实现。 阅读全文
posted @ 2020-08-29 07:32 罗西的思考 阅读(1596) 评论(1) 推荐(0)
摘要:Flink的Slot概念大家应该都听说过,但是可能很多朋友还不甚了解其中细节,比如具体Slot究竟代表什么?在代码中如何实现?Slot在生成执行图、调度、分配资源、部署、执行阶段分别起到什么作用?本文和下文将带领大家一起分析源码,为你揭开Slot背后的机理。 阅读全文
posted @ 2020-08-24 15:56 罗西的思考 阅读(7656) 评论(0) 推荐(1)
摘要:Alink 是阿里巴巴基于实时计算引擎 Flink 研发的新一代机器学习算法平台,是业界首个同时支持批式算法、流式算法的机器学习平台。本文将带领大家来分析Alink中 Quantile 的实现。 阅读全文
posted @ 2020-08-19 21:20 罗西的思考 阅读(783) 评论(0) 推荐(0)
摘要:Alink 是阿里巴巴基于实时计算引擎 Flink 研发的新一代机器学习算法平台,是业界首个同时支持批式算法、流式算法的机器学习平台。本文将带领大家来分析Alink中 MultiStringIndexer 的实现。 阅读全文
posted @ 2020-08-15 07:51 罗西的思考 阅读(499) 评论(0) 推荐(0)
摘要:本文涉及到Flink SQL UDAF,Window 状态管理等部分,希望能起到抛砖引玉的作用,让大家可以借此深入了解这个领域。 阅读全文
posted @ 2020-08-12 07:50 罗西的思考 阅读(1287) 评论(0) 推荐(0)
摘要:Alink 是阿里巴巴基于实时计算引擎 Flink 研发的新一代机器学习算法平台,是业界首个同时支持批式算法、流式算法的机器学习平台。本文和上文将带领大家来分析Alink中 Word2Vec 的实现。 阅读全文
posted @ 2020-08-08 09:40 罗西的思考 阅读(848) 评论(0) 推荐(0)
摘要:Alink 是阿里巴巴基于实时计算引擎 Flink 研发的新一代机器学习算法平台,是业界首个同时支持批式、流式算法的机器学习平台。本文和下文将带领大家来分析Alink中 Word2Vec 的实现。 阅读全文
posted @ 2020-08-03 18:10 罗西的思考 阅读(1390) 评论(0) 推荐(0)
摘要:本文通过分析学习两篇文章来看目前工业界可能偏好的解决方案,也顺便探寻下Yarn的未来发展方向。 阅读全文
posted @ 2020-08-01 08:52 罗西的思考 阅读(738) 评论(0) 推荐(1)
摘要:Alink 是阿里巴巴基于实时计算引擎 Flink 研发的新一代机器学习算法平台,是业界首个同时支持批式算法、流式算法的机器学习平台。本文和前文将带领大家来分析Alink中多层感知机的实现。 阅读全文
posted @ 2020-07-29 20:49 罗西的思考 阅读(1179) 评论(0) 推荐(0)
摘要:Alink 是阿里巴巴基于实时计算引擎 Flink 研发的新一代机器学习算法平台,是业界首个同时支持批式算法、流式算法的机器学习平台。本文和下文将带领大家来分析Alink中多层感知机的实现。 阅读全文
posted @ 2020-07-26 18:03 罗西的思考 阅读(1046) 评论(0) 推荐(0)
摘要:Alink 是阿里巴巴基于实时计算引擎 Flink 研发的新一代机器学习算法平台,是业界首个同时支持批式算法、流式算法的机器学习平台。本文和上文一起介绍了在线学习算法 FTRL 在Alink中是如何实现的,希望对大家有所帮助。 阅读全文
posted @ 2020-07-22 21:03 罗西的思考 阅读(1738) 评论(0) 推荐(1)