perfector

摘要： 分布式架构下如何选择最佳 Store？ 一、背景 开务数据库是一款云原生分布式数据库，基于分布式架构特点其存储数据默认有 3 份，分别存储在各节点下的不同 Store 中。在多节点多 Store 的情况下，如何选择存储数据的 Store 就显得尤为重要。 开务数据库中通过特定算法，根据 Store 阅读全文

摘要： Envoy 有状态会话保持机制设计与实现 1 问题背景 会话保持是七层负载均衡的核心功能之一。对于同一会话的请求或者连接，通过会话保持机制，负载均衡软件会将其路由到同一个后端，以利用局部性原理来提高服务整体的效率。 在传统的 LB 产品之中，会话保持能力可以说是重中之重，比如 F5 软件就提供了丰富 阅读全文

摘要： 如何实现数据库读一致性 1 导读 数据的一致性是数据准确的重要指标，那如何实现数据的一致性呢？本文从事务特性和事务级别的角度和大家一起学习如何实现数据的读写一致性。 2 一致性 1. 数据的一致性：通常指关联数据之间的逻辑关系是否正确和完整。 举个例子：某系统实现读写分离，读数据库是写数据库的备份库 阅读全文

摘要： PostgreSQL 逻辑复制解密 在数字化时代的今天，我们都认同数据会创造价值。为了最大化数据的价值，我们不停的建立着数据迁移的管道，从同构到异构，从关系型到非关系型，从云下到云上，从数仓到数据湖，试图在各种场景挖掘数据的价值。而在这纵横交错的数据网络中，逻辑复制扮演着及其重要的角色。 让我们将视 阅读全文

摘要： SSH 公钥私钥的生成管理 一、生成公钥/私钥对 生成公钥/私钥对的命令（Windows/Linux）： ssh-keygen -b 4096 -C 张三 -N password -f ./zhangsan-key 参数说明： -b 4096：表示密钥的长度，建议 4096 起。 -C 张三：在公钥 阅读全文

摘要： Hive on Spark 和 Spark sql on Hive，你能分的清楚么 结构上 Hive On Spark 和 SparkSQL 都是一个翻译层，把一个 SQL 翻译成分布式可执行的 Spark 程序。Hive 和 SparkSQL 都不负责计算。Hive 的默认执行引擎是 mr，还可以 阅读全文

摘要： Java 中的异常处理机制 本篇文章主要介绍了 Java 中的异常 如何处理函数抛出的异常 处理异常的原则 异常处理时，性能开销大的地方 Java 语言在设计之初就提供了相对完善的异常处理机制。 我们首先介绍一下 Java 中的异常。 介绍 Java 中的异常 异常是程序在运行过程中出现的程序异常事 阅读全文

摘要： 开发一个不需要重写成 Hive QL 的大数据 SQL 引擎 学习大数据技术的核心原理，掌握一些高效的思考和思维方式，构建自己的技术知识体系。明白了原理，有时甚至不需要学习，顺着原理就可以推导出各种实现细节。 各种知识表象看杂乱无章，若只是学习繁杂知识点，固然自己的知识面是有限的，并且遇到问题的应变 阅读全文

摘要： 理解 virt、res、shr 之间的关系（linux 系统篇） 前言 想必在 linux 上写过程序的同学都有分析进程占用多少内存的经历，或者被问到这样的问题 —— 你的程序在运行时占用了多少内存（物理内存）？ 通常我们可以通过 top 命令查看进程占用了多少内存。这里我们可以看到 VIRT、RE 阅读全文

摘要： 输入的查询 SQL 语句，是如何执行的？ 执行如下 SQL，我们看到的只是输入一条语句，返回一个结果，却不知道这条语句在 MySQL 内部的执行过程。 select * from where id ='1'; 上图给出的是 MySQL 的基本架构示意图，从中你可以清楚地看到 SQL 语句在 MySQ 阅读全文