《数据资产管理核心技术与应用》读书笔记-第五章：数据服务(一)
《数据资产管理核心技术与应用》是清华大学出版社出版的一本图书，全书共分10章，第1章主要让读者认识数据资产，了解数据资产相关的基础概念，以及数据资产的发展情况。第2～8章主要介绍大数据时代数据资产管理所涉及的核心技术，内容包括元数据的采集与存储、数据血缘、数据质量、数据监控与告警、数据服务、数据权限... ...
Percona Toolkit 神器全攻略（开发类）
Percona Toolkit 神器全攻略（开发类） Percona Toolkit 神器全攻略系列共八篇，前文回顾： 前文回顾 Percona Toolkit 神器全攻略 Percona Toolkit 神器全攻略（实用类） Percona Toolkit 神器全攻略（配置类） Percona T ...
中国每个软件创业者都是这个时代的“黑悟空”
作者 | 白鲸开源CEO 郭炜 我作为一个具有30+游龄而20年+都不碰游戏的游戏玩家，最近为了《黑神话:悟空》（简称，黑悟空），不但花重金更新了显卡，还第一次下载了Steam并绑定了支付，为的就是支持这个第一次走出国门的3A游戏大作。 因为，我在《黑悟空》3A作品诞生的经历里，看到了中国软件创业者 ...
Apache SeaTunnel数据处理引擎适配的演进和规划
作者 | Chao Tian (tyrantlucifer)，Apache SeaTunnel PMC Member 摘要 Apache SeaTunnel作为一个高性能数据同步工具，以其高效的数据处理能力，为数据集成领域带来了创新。在引擎上，Apache SeaTunnel除了支持自身的Zeta引 ...
从零到一，全面掌握Apache DolphinScheduler发版流程，实战派经验分享！
引言 Apache DolphinScheduler的发版流程对于确保软件质量和社区协作至关重要，社区Committer王兴杰为我们详细介绍了Apache DolphinScheduler的发版流程，包括环境准备、流程文档、基础工具准备、依赖包确认等关键步骤，并指出了发版流程中可能会遇到的麻烦以及相 ...
独家揭秘丨GreatSQL 的MDL锁策略升级对执行的影响
独家揭秘丨GreatSQL 的MDL锁策略升级对执行的影响 一、MDL锁策略介绍 GreatSQL 的MDL锁有个策略方法类MDL_lock_strategy，它根据对象的类型分为了scope类型和object类型，前者主要用于GLOBAL, COMMIT, TABLESPACE, BACKUP_L ...
自定义 MySQL Shell 提示符
MySQL Shell 中的提示符的样式和格式可以根据使用者的需求进行定制。我们可以配置提示符以显示有关数据库连接和使用的模式的不同或简化信息。本文将展示如何添加视觉提示，让您知道何时连接到生产数据库。 设置步骤既然您正在阅读关于自定义 MySQL Shell 的内容，您应该已经安装了它。如果没有， ...
[20240818]测试21c下sqlplus show recyclebin的小问题2.txt
[20240818]测试21c下sqlplus show recyclebin的小问题2.txt--//以前测试过,链接[20210722]sqlplus下show recycebin的小问题.txt--//注:recycebin 拼写错误 应该是 recyclebin.--//这个问题当时也是浪费 ...
mysql.user表的数据准确性问题
mysql.user这个系统表中有些字段的数据是不准确的(或者说是不一定准确，这样表达更严谨一点)。这是一个让人头疼的问题，下面简单述说一下问题，主要是mysql.user表中的password_lifetime,password_reuse_history,password_reuse_time这 ...
【中国数据库前世今生】数据存储管理的起源与现代数据库发展启蒙
记录开启本篇的目的: 作为1名练习时长2年半的DBA，工作大部分时间都在和数据库打交道，包括Oracle,Mysql,Postgresql,Opengauss等国内外数据库。但是对数据库的发展史却知之甚少。 正好腾讯云开发者社区正在热播:【纪录片】中国数据库前世今生,借此机会了解数据库发展历史，和演 ...
深入分析与解决方案：缓存与数据库双写不一致问题
总之，在选择是否使用缓存及其设计时，需要根据业务场景和数据一致性要求进行权衡。缓存应主要用于提升读操作性能，而对于写多读多且对一致性要求高的场景，可能需要依赖数据库本身的能力或采用其他策略来处理数据的一致性问题。 ...
小白系列：数据库基础知识解析
尽管我们在本文中只触及了数据库的基础部分，实际应用中可能会遇到更复杂的业务逻辑和需求。这些复杂的场景通常需要深入了解更多高级特性和技巧。虽然这些内容超出了本文的范围，但掌握基本操作是迈向高级技能的第一步。希望通过这篇文章，你能够对数据库有一个清晰的认识，并在实际工作中熟练运用这些基本操作。未来，随着... ...
[20240814]oracle 21c NLS_DATE_FORMAT设置问题(整理版本1).txt
[20240814]oracle 21c NLS_DATE_FORMAT设置问题(整理版本1).txt--//朋友遇到的问题，请求远程协助解决问题：--//执行sqlplus出现如下错误：SQL*Plus: Release 21.0.0.0.0 - Production on Sat Aug 10 ...
使用DBeaver(通用数据库管理工具)连接人大金仓数据库
1、背景描述 在信创的大背景下，信息技术人员开始需要频繁接触国产数据库。 人大金仓数据库是国内先进的数据库产品，广泛服务于各个重点行业和关键领域，累计装机部署超百万套。 2020年，人大金仓实现在国产数据库关键应用领域销售套数占比第一的市场地位。 虽然人大金仓提供了官方的数据库管理工具，但是对于非D ...
单条记录大小增长倍数和ibd文件大小的增长倍数不成正比
单条记录大小增长倍数和ibd文件大小的增长倍数不成正比 环境信息 数据库版本: GreatSQL 8.0.25 字符集：utf8mb4 innodb_default_row_format: dynamic innodb_page_size: 16384 问题描述 表数据为新insert数据，无del ...
优化系统性能：深入探讨Web层缓存与Redis应用的挑战与对策
Web层缓存显著提高了应用性能，通过减少重复的数据处理和数据库查询来加快响应时间。Redis作为高效的内存数据结构存储系统，在实现缓存层中发挥了重要作用，它支持各种数据结构，能够迅速存取数据，从而减少数据库负担，提升用户体验。然而，缓存机制也面临挑战，如缓存穿透、缓存击穿和缓存雪崩等问题。缓存穿透通... ...
《数据资产管理核心技术与应用》读书笔记-第四章：数据质量的技术实现（一）
《数据资产管理核心技术与应用》是清华大学出版社出版的一本图书，全书共分10章，第1章主要让读者认识数据资产，了解数据资产相关的基础概念，以及数据资产的发展情况。第2～8章主要介绍大数据时代数据资产管理所涉及的核心技术，内容包括元数据的采集与存储、数据血缘、数据质量、数据监控与告警、数据服务、数据权限 ...
这次轮到AntV增强Awesome-Graphs
AntV团队迅速将G6图可视化引擎融入Awesome-Graphs项目，发布1.2.0版本，提升交互体验，包括路径高亮、模糊搜索等功能，现邀请体验并征集改进意见。 ...
周期补数据、定时补数据，深入了解两种补数据的特殊方式
在当今数字化的时代，数据已然成为企业决策与运营的关键要素。而保障数据的完整性、准确性以及及时性，对于企业的发展有着举足轻重的意义。在数据运维管理范畴内，补数据属于大数据开发和运维人员常用的运维操作手段。 周期补数据和定时补数据作为两个相对特殊的补数据方式，在各类不同的场景中均发挥着至关重要的作用。 ...
GreatSQL 并行Load Data加快数据导入
GreatSQL 并行Load Data加快数据导入 数据库信息 数据库版本:GreatSQL 8.0.32-25 Clickhouse表需要导入到 GreatSQL 中，表数据量庞大所以选用导出CSV的方式。 测试数据复现操作 load data MySQL load data 语句能快速将一个文 ...
