林锅 - 博客园

2022年3月24日

摘要： CAP CAP原则又称CAP定理，指的是在一个分布式系统中： Consistency（一致性）：每次读操作都能保证返回的是最新数据。 Availability（可用性）：任何一个没有发生故障的节点，会在合理的时间内返回一个正常的结果。备注：在集群中一部分节点故障后，集群整体是否还能响应客户端的读写阅读全文

posted @ 2022-03-24 23:16 林锅阅读(94) 评论(0) 推荐(0) 编辑

Spark VS Flink

摘要：（1）设计理念 1、Spark的技术理念是使用微批来模拟流的计算,基于Micro-batch,数据流以时间为单位被切分为一个个批次,通过分布式数据集RDD进行批量处理,是一种伪实时。 2、Flink是基于事件驱动的，是面向流的处理框架, Flink基于每个事件一行一行地流式处理，是真正的流式计算. 阅读全文

posted @ 2022-03-24 17:56 林锅阅读(159) 评论(0) 推荐(0) 编辑

Flink 知识点

该文被密码保护。阅读全文

posted @ 2022-03-24 17:55 林锅阅读(0) 评论(0) 推荐(0) 编辑

Java 知识点

该文被密码保护。阅读全文

posted @ 2022-03-24 17:52 林锅阅读(1) 评论(0) 推荐(0) 编辑

2022年3月20日

证券交易系统架构演进

摘要：券商作为证券市场的中介机构，承担了为广大投资者提供证券交易通道的市场责任。你知道交易指令是如何传递到交易所并最终成交的吗？上图是一个典型的券商交易系统逻辑架构，手机App、网上交易等系统称为渠道系统，职责是为投资者提供交易渠道，并对指令做初步的要素检查，最终所有合法交易指令都会发送到集中交易系统进阅读全文

posted @ 2022-03-20 23:42 林锅阅读(3107) 评论(0) 推荐(0) 编辑

Linux CPU缓存一致性

摘要：下面的左图为最简单的高速缓存的配置，数据的读取和存储都经过高速缓存，CPU核心与高速缓存有一条特殊的快速通道；主存与高速缓存都连在系统总线上（BUS）这条总线还用于其他组件的通信。在高速缓存出现后不久，系统变得越来越复杂，高速缓存与主存之间的速度差异被拉大，直到加入了另一级缓存，新加入的这级缓存比阅读全文

posted @ 2022-03-20 12:26 林锅阅读(392) 评论(0) 推荐(0) 编辑

Linux 段页式内存管理

摘要：分段机制分段(Segmentation)：这种方法是人们最开始使用的一种方法，基本思路是将程序所需要的内存地址空间大小的虚拟空间映射到某个物理地址空间。每个程序都有其独立的虚拟的独立的进程地址空间，可以看到程序A和B的虚拟地址空间都是从0x00000000开始的。我们将两块大小相同的虚拟地址空间阅读全文

posted @ 2022-03-20 11:55 林锅阅读(279) 评论(0) 推荐(0) 编辑

事件驱动模型

摘要：事件驱动体系结构是目前比较广泛使用的一种。这种方式会定义一系列的事件处理器来响应事件的发生，并且将服务端接受连接与对事件的处理分离。其中，事件是一种状态的改变。比如，tcp中socket的new incoming connection、ready for read、ready for write。阅读全文

posted @ 2022-03-20 11:32 林锅阅读(839) 评论(0) 推荐(0) 编辑

2022年3月16日

Kafka 数据丢失问题总结

摘要：数据丢失是一件非常严重的事情事，针对数据丢失的问题我们需要有明确的思路来确定问题所在，解决思路如下：是否真正的存在数据丢失问题，比如有很多时候可能是其他同事操作了测试环境，所以首先确保数据没有第三方干扰。理清你的业务流程，数据流向，数据到底是在什么地方丢失的数据，在kafka 之前的环节或者ka 阅读全文

posted @ 2022-03-16 11:35 林锅阅读(1681) 评论(0) 推荐(0) 编辑

2022年3月15日

Kafka Rebalance机制和选举策略

摘要：引用：https://www.cnblogs.com/huzhanfei/p/kafka-rebalance-ji-zhi-he-xuan-ju-ce-lue-zong-jie.html Kafka作为大数据领域常用的消息中间件，其核心原理相对于其它消息中间件而言更为复杂，本文主要介绍Kafka消费阅读全文

posted @ 2022-03-15 23:26 林锅阅读(853) 评论(0) 推荐(0) 编辑

林锅技术园

https://github.com/GaVender

公告