整理了一下pg_dump逻辑备份还原，pg啥时候推出一个库级别的物理备份还原就好，逻辑备份能行但操作大库效率太低，就像MySQL/MSSQL一样，跨实例做库级别还原的需求太多了 pg_dump备份 pg_dump备份 -F format 参数，备份文件的格式。format可以是下列之一： p pla ...

Percona Toolkit 神器全攻略（系统类） Percona Toolkit 神器全攻略系列共八篇，前文回顾： 前文回顾 Percona Toolkit 神器全攻略 Percona Toolkit 神器全攻略（实用类） Percona Toolkit 神器全攻略（配置类） Percona T ...

索引 百万级别或以上的数据如何删除？ 关于索引：由于索引需要额外的维护成本，因为索引文件是单独存在的文件，所以当我们对数据的增加、修改、删除都会产生额外的对索引文件的操，这些操作需要消耗额外的IO，会降低增/改/删的执行效率。所以，在我们删除数据库百万级别数据的时候，查询MySQL官方手册得知删除数 ...

背景ClickHouse是一个面向分析型的开源列式数据库管理系统,它主要应用于以下几个场景: 数据仓库和商业智能分析:ClickHouse擅长处理大规模的数据,可以用于构建企业级的数据仓库,支持复杂的OLAP查询,可用实时数仓，适合各种商业分析和报表应用。 实时分析和监控:ClickHouse以毫秒 ...

Apache SeaTunnel 2.3.6 版本于近日正式发布，社区期待的 SeaTunnel Zeta Master/Worker 新架构、事件通知机制、支持动态编译的transform等新功能和新能力在这次版本中都有了全面的更新，并添加了首个向量数据库 Milvus。此外，本版本还进行了一些基 ...

一、背景 大数据服务是数据平台建设的基座，随着B站业务的快速发展，其大数据的规模和复杂度也突飞猛进，技术的追求也同样不会有止境。 B站一站式大数据集群管理平台（BMR），在千呼万唤中孕育而生。本文简单介绍BMR的由来、面临的主要矛盾以及如何在变化中求得生存与发展。 下图是截至2024年6月初，统计到 ...

摘要：现在商用优化器大多都是基于统计信息进行查询代价评估，因此统计信息是否实时且准确对查询影响很大，特别是分布式数据库场景。本文详细介绍GaussDB(DWS)如何实现了一种轻量、实时、准确的统计信息自动收集方案。 本文分享自华为云社区《【最佳实践】GaussDB(DWS) 统计信息自动收集方案》， ...

在大数据时代，企业对数据的依赖程度越来越高。然而，随着业务的不断发展和技术的快速迭代，大数据平台的集群迁移已成为企业数据中台发展途中无法回避的需求。在大数据平台发展初期，国内数据中台市场主要以国外开源 CDH、商业化 CDP、HDP 为主。然而，由于国际形势的转变，以海外大数据基础平台作为基石构建的 ...

MySQL UDF 提权初探 对 MySQL UDF 提权做一次探究，什么情况下可以提权，提取的主机权限是否跟mysqld进程启动的主机账号有关 数据库信息 MySQL数据库版本:5.7.21 UDF UDF：(User Defined Function) 用户自定义函数，MySQL数据库的初衷是用 ...

数据库基础知识 为什么要使用数据库？ 数据保存在内存 优点：存取速度快 缺点：数据不能永久保存 数据保存在文件 优点：数据永久保存 缺点： 速度比内存操作慢，频繁的IO操作。 查询数据不方便 数据保存在数据库 数据永久保存 使用SQL语句，查询方便效率高。 管理数据方便 什么是SQL? 结构化查询语 ...

事务复制中订阅节点非活动（ inactive）错误 在SQLServer的事务复制模型中，会出现“订阅过期”的错误，相关订阅分发代理Job的典型错误如下："Agent SQLNYC01-Onvoices-PubInvoicesInvoices-SQLNYC01-1353 is retrying af ...

《数据资产管理核心技术与应用》是清华大学出版社出版的一本图书，全书共分10章，第1章主要让读者认识数据资产，了解数据资产相关的基础概念，以及数据资产的发展情况。第2～8章主要介绍大数据时代数据资产管理所涉及的核心技术，内容包括元数据的采集与存储、数据血缘、数据质量、数据监控与告警、数据服务、数据权限 ...

在当今数字化的时代，企业对于数据的管理和利用愈发重视，而构建全面的指标管理体系成为了企业提升数据价值、优化决策流程的关键环节。 构建完整的指标属性体系 指标属性体系是指标管理的核心，我们一般将指标属性划分为四类：基础属性、业务属性、技术属性和管理属性。 基础属性：如指标名称、编码等。 业务属性：如业 ...

例如，有如下一张表，表名为bk_test。插入了以下数据: CREATE TABLE BK_TESK(id varchar2(10),s varchar2(20)); insert into BK_TESK values ('A','1,2,3'); insert into BK_TESK valu ...

1.背景 或许你面试的时候被问到了mysql的排序问题 又或许你在学习排序算法的时候想到了数据库的排序是如何实现的呢 下面重点从面试的角度来回答这个问题 2.面试回答 1.普通面试者回答 普通面试者的回答通常是点对点的回答,如下: MySQL 实现数据的排序主要通过排序算法和索引结构来完成。排序操作 ...

GreatSQL 8.0.32-26 今日发布 版本信息 发布时间：2024年08月05日 版本号：8.0.32-26, Revision a68b3034c3d 下载链接：https://gitee.com/GreatSQL/GreatSQL/releases/tag/GreatSQL-8.0.3 ...

写在前面 大家好，不知道前面的20题大家写的怎么样，前面分享的20题是SQL中查询的基础题型，这部分被称为DQL部分，是每个学习MySQL必须要学会的部分，下面就让我来介绍MySQL中的TCL部分，也就是事务部分。 ACID四大特性 事务的概述 事务的ACID特性可以确保银行不会弄丢你的钱。而在应用 ...

目录三.MySQL3.1 关系型和非关系型数据库的区别关系型数据库非关系型数据库3.2 登录数据库的方式，如何远程登录3.3 MySQL的服务结构，当客户端发起请求后，处理过程3.4 如何设置或者重置MySQL密码3.5 DDL,DML,DQL,DCL等SQL语句的写法DDL数据定义语句DCL数据控 ...

在处理数据库查询时，我们经常需要对结果进行分页，以便在用户界面上提供更好的浏览体验。MySQL提供了几种不同的方法来实现这一功能，其中最常见的是使用LIMIT子句。以下是三种使用LIMIT进行分页的基本方法。 一、使用LIMIT子句LIMIT子句用于指定查询结果的最大记录数。它的基本语法如下： 这里 ...

1.inner join，内连接,显示两个表中有联系的所有数据。 当两个表中存在匹配的数据时，‌返回满足条件的SELECT结果。‌内连接只返回两个表中匹配的记录，‌如果某一方没有匹配的记录，‌则不会出现在结果集中。‌ 2.left join，左链接,以左表为参照,显示所有数据,右表中没有则以null ...