上一页 1 ··· 14 15 16 17 18 19 20 21 22 ··· 54 下一页
摘要: 近日常有同学来问我如何阅读代码,关于这个问题的一般性答案我特别提了一个问题并自问自答。出于提供一个实际的例子的考量,正好此前综合地阅读了 Spark 的 RPC 实现、Flink 基于 Akka 的 RPC 实现和 Actor Model 的通信模型,写成本文分享我阅读分布式计算系统 Spark 和 阅读全文
posted @ 2021-09-27 15:21 ludongguoa 阅读(119) 评论(0) 推荐(0) 编辑
摘要: 我们经常需要在一个时间窗口维度上对数据进行聚合,窗口是流处理应用中经常需要解决的问题。Flink的窗口算子为我们提供了方便易用的API,我们可以将数据流切分成一个个窗口,对窗口内的数据进行处理。本文将介绍如何在Flink上进行窗口的计算。 一个Flink窗口应用的大致骨架结构如下所示: // Key 阅读全文
posted @ 2021-09-27 15:20 ludongguoa 阅读(588) 评论(0) 推荐(0) 编辑
摘要: 在过去的一年里,他靠 GitHub 项目的打赏赚到了 10 万美元。在他的自述文章中,他分享了自己靠 GitHub 项目赚钱的经历和技巧。Caleb Porzio 发推庆祝自己靠 GitHub 打赏(GitHub Sponsors)赚到了 10 万美元。GitHub Sponsors 是 GitHu 阅读全文
posted @ 2021-09-27 15:19 ludongguoa 阅读(319) 评论(0) 推荐(0) 编辑
摘要: 前言 为了保证程序的容错恢复以及程序启动时其状态恢复,几乎所有公司的实时任务都会开启 Checkpoint 或者触发 Savepoint 进行状态保存。为了使得用户更加理解这两点区别,本文结合 Flink 1.9 版本,重点讲述 Flink Checkpoint,Savepoint 相关概念以及注意 阅读全文
posted @ 2021-09-27 15:16 ludongguoa 阅读(1234) 评论(0) 推荐(0) 编辑
摘要: 引言 近些年,企业对数据服务实时化服务需求日益增多。本文整理了常见实时数据组件的性能特点和适用场景,介绍了美团如何通过 Flink 引擎构建实时数据仓库,从而提供高效、稳健的实时数据服务。此前我们美团技术博客发布过一篇文章《流计算框架 Flink 与 Storm 的性能对比》,对 Flink 和 S 阅读全文
posted @ 2021-09-27 15:15 ludongguoa 阅读(376) 评论(0) 推荐(0) 编辑
摘要: 简介: 本文所有的实战演练都将在 Flink SQL CLI 上执行,全程只涉及 SQL 纯文本,无需一行 Java/Scala 代码,无需安装 IDE。 上周四在 Flink 中文社区钉钉群中直播分享了《Demo:基于 Flink SQL 构建流式应用》,直播内容偏向实战演示。这篇文章是对直播内容 阅读全文
posted @ 2021-09-27 15:13 ludongguoa 阅读(202) 评论(0) 推荐(0) 编辑
摘要: 前言 深度学习领域,最常见的就是各种网络模型,那么在写论文或者文章,介绍网络模型的时候,最好的办法当然就是展示代码画图,今天介绍的 Github 项目,就是整理了 22 个设计和可视化网络结构的工具,其地址如下: https://github.com/ashishpatel26/Tools-to-D 阅读全文
posted @ 2021-09-27 15:12 ludongguoa 阅读(714) 评论(0) 推荐(0) 编辑
摘要: 熟悉Oracle的人,想必对临时表(temporary table)并不陌生,很多场景对解决问题起到不错的作用,开源库Postgresql中,也有临时表的概念,虽然和Oracle中临时表名字相同,使用方法和特性也有类似的地方,但还是有很多不同的方面,下面就对比Oracle中临时表举例说明下。 1、P 阅读全文
posted @ 2021-09-27 15:09 ludongguoa 阅读(1282) 评论(0) 推荐(0) 编辑
摘要: 今天是Python专题的第21篇文章,我们继续多线程的话题。 上周的文章当中我们简单介绍了线程和进程的概念,以及在Python当中如何在主线程之外创建其他线程,并且还了解了用户级线程和后台线程的区别以及使用方法。今天我们来看看线程的其他使用,比如如何停止一个线程,线程之间的Event用法等等。 停止 阅读全文
posted @ 2021-09-27 15:07 ludongguoa 阅读(73) 评论(0) 推荐(0) 编辑
摘要: 前言 1.1 随便先说下 Linux 内核非常庞大,我说的非常大并不是为了吓唬大家,确实是非常多的代码,超过 600 万行的代码,所以我写文章介绍 Linux 内核,也不可能每一行代码去分析,但是我会提炼其中的重点出来,告诉大家,Linux 内核的构成,包含哪些东西,我们不管学习什么,最关键的是学会 阅读全文
posted @ 2021-09-27 15:05 ludongguoa 阅读(1084) 评论(0) 推荐(0) 编辑
上一页 1 ··· 14 15 16 17 18 19 20 21 22 ··· 54 下一页