02 2023 档案
摘要:QGS 发表于 2022/04/12 15:19:48 1.8k+ 0 0 【摘要】 openEuler 22.03-LTSx86安装UKUI+DDE双桌面环境+内置openGauss2.1.0 2022年3月,openEuler 22.03 LTS版本ISO安装包仓库及LTS官方软件仓库均上线op
阅读全文
该文被密码保护。
摘要:Zookeeper典型应用场景汇总 数据发布与订阅(配置中心) 发布与订阅模型,即所谓的配置中心,顾名思义就是发布者将数据发布到ZK节点上,供订阅者动态获取数据,实现配置信息的集中式管理和动态更新。例如全局的配置信息、服务式服务框架的服务地址列表等就非常适合使用。 应用中用到的一些配置信息放到ZK上
阅读全文
摘要:关于数据仓库的概念,这里不再累赘。先看下面的图(数据仓库建设的7个主要环节): 本文,主要针对第三块数据仓库模型设计来讨论交流,尤其是互联网行业。 一、关于数据仓库数据模型 1. 数据仓库数据模型是指使用实体、属性及其关系对企业运营和逻辑规则进行统一的定义、编码和命名;是业务人员和开发人员之间沟通的
阅读全文
摘要:Presto简介 Presto是一个由Facebook开源的分布式SQL查询引擎,适用于交互式分析查询,数据量支持GB到PB字节。 Presto是一个运行在多台服务器上的分布式系统。 完整安装包括一个coordinator和多个worker。 由客户端提交查询,从Presto命令行CLI提交到coo
阅读全文
摘要:异构数据源海量数据交换工具-Taobao DataX 下载和使用 大数据平台 lxw1234@qq.com 8年前 (2015-05-29) 86436℃ 20评论 DataX介绍 DataX是一个在异构的数据库/文件系统之间高速交换数据的工具,实现了在任意的数据处理系统(RDBMS/Hdfs/Lo
阅读全文
摘要:Debezium 1. 什么是Debezium Debezium是基于Apache License 2.0 协议的开源项目,是一个基于数据库日志(PostgreSQL的WAL,Mysql的binlog等)的CDC(change data capture)工具,以非侵入式的方式做数据库之间的数据同步。
阅读全文
摘要:实时数仓的第一步便是变更数据捕获(CDC),Debezium就是一款功能非常强大的CDC工具。Debezium是构建于Kafka之上的,将捕获的数据实时的采集到Kafka上 Debezium监控MySQL 监控MySQL的前提是MySQL需要开启binlog日志哦 MySQL开启binlog MyS
阅读全文
摘要:CDC = Change Data Capture,是一种用以掌控数据变化的软件架构(或者再通俗一点:技术思路)。具体架构/思想背后会有不同的工程实现思路,本文我们就来深入理解一下。 更新历史 2022.08.27: 完成初稿 注:本文图片来自参考链接 1 何为 CDC CDC 这个名词应该大家都不
阅读全文
摘要:这篇文章是对 变更数据捕获 (CDC) 实践的介绍,而不是对特定工具的深入探讨。 假设我们正在构建一个简单的 Web 应用程序。在大多数情况下,此类项目从最小的数据架构开始。例如,像 MySQL 或 PostgreSQL 这样的关系数据库足以处理和存储许多用户可以使用的数据。他们输入查询,更新它们,
阅读全文
摘要:SQL SERVER——TempDB问题查找定位与解决 z_cloud_for_SQL2023-01-12 29 步骤1.TempDB压力诊断 等待类型诊断 TempDB的争用压力在等待篇中已经简单介绍,等待的表现为 pagelatch_类等待,等待的资源是 “2: X :X ” tTempDB所在
阅读全文
摘要:几种比较重要的项目管理方法 发布时间:2021.09.10 10:58:19 作者:36氪企服点评小编 阅读次数:1.28k次 计划管理人员可以帮助组织以最有效、最高效的方式改进项目,同时减少风险。但是这样做不仅需要确认组织的优先事项。同时也需要深入研究每个项目管理方法如何能够产生最大的正面影响,以
阅读全文
摘要:1. 数据库简要介绍 数据库在企业中有着重要的地位和应用,华为 GaussDB 数据库在鲲鹏生态中是主力场景之一。数据库总体可以分为关系型数据库和非关系型数据库。 对于关系型数据库,有企业生产交易的 OLTP 数据库和企业分析的 OLAP 数据库。针对 OLTP 应用场景华为推出云数据库 Gauss
阅读全文
摘要:作者: bzhaoopenstack(https://github.com/bzhaoopenstack) PG在混步跨硬件平台的首次試水,此次基於Bucardo部署PG跨硬件平台集群。 基于Bucardo建立PostgreSQL 主主混合集群部署 PostgreSQL集群化部署,有很多种主流方案,
阅读全文
摘要:pgsql物理复制(pgsql 备库的搭建以及角色互换,提升) 结构图如下: Postgresql早在9.0版本开始支持物理复制,也称为流复制,通过从实例级复制出一个与主库一模一样的备库。流复制同步方式有同步,异步两种,如果主节点和备节点不是很忙,通常异步模式下备库和主库的延迟时间能够控制在毫秒级。
阅读全文
摘要:【PostgreSQL架构】PostgreSQL的最佳PG群集高可用性(HA)解决方案 首页 ⟶ 数据管理 ⟶ PostgreSQL架构 ⟶ 【PostgreSQL架构】PostgreSQL的最佳PG群集高可用性(HA)解决方案 intelligentx 22 January 2020 SEO Ti
阅读全文
摘要:pgCluu:一个PostgreSQL性能监控和审计工具 by pgCluu社区 发布于 2020/05/29 浏览量 13,032 8,809 标签:监控 pgCluu是一个PostgreSQL性能监控和审计工具,用于从数据库集群中收集数据。该产品分为两部分:通过命令行操作的PostgreSQL
阅读全文
摘要:hg_repmgr是对开源工具repmgr做的增强型开发工具。Repmgr作为一个流复制管理工具,在集群高可用功能上比较欠缺。为此hg_repmgr做了功能增强,增加了virtual ip,自动恢复失效节点、脑裂检查等,具体参考下面功能增强介绍。 项目开源地址: 码云:https://gitee.c
阅读全文
摘要:谈谈双活业务中心和异地容灾备份设计 今天谈下多数据中心和异地容灾备份方面的内容。在前面一篇文章里面我详细谈到过一个软件业务系统的高可用性设计,其中既包括了IT基础设施的高可用,也包括了业务软件系统设计方面的高可用性设计。 对于高可用,我想再简单总结下,核心为三个方面的内容: 高可靠:冗余性设计,无任
阅读全文
摘要:一、环境 $ cat /etc/redhat-release CentOS Linux release 7.0.1406 (Core) $ uname -a Linux zhaopin-5-90 3.10.0-123.el7.x86_64 #1 SMP Mon Jun 30 12:09:22 UTC
阅读全文
摘要:PostgreSQL 的多主应用部署 原创 kenyon_君羊 PostgreSQL架构 2014/09/02 18:41 阅读数 1.3W 本文被收录于专区 PostgreSQL 进入专区参与更多专题讨论 postgresql 的现有版本没有提供内置的多主复制功能,这个一般需要自己写工具或使用其他
阅读全文
摘要:PostgreSQL/lightdb逻辑复制详解及双活解决方案 原创 zhjh2562022-12-10 15:22:50©著作权 文章标签postgresqlidejson文章分类虚拟化云计算阅读数95 之所以有逻辑复制,是因为物理复制是基于数据块的复制,每个实例的数据块是自己维护的,无法做到全局
阅读全文
摘要:1. openGauss主备HA 主备复制采用WAL日志复制技术,支持级联备库,目前支持一主八备规模,支持同步复制、异步复制,支持最大可用模式,支持switchover、failover操作。Switchover:主机运行正常,因为维护等需求进行switchover操作,switchover之后主机
阅读全文
摘要:Vastbase G100高可用集群搭建 苏水的北關注IP屬地: 贵州 0.2112022.06.01 10:42:53字數 4,560閱讀 1,036 1. 概述 Vastbase 集群支持搭建一主一备与一主多备,本文档目的在于指导用户完成 Vastbase 数据库一主两备集群安装。 2. 集群架
阅读全文
摘要:文章标签:chatgpt, 人工智能, 木瓜移动 最近什么最火? 当然是人工智能ChatGpt,它可以仅仅凭借你的一段文字指令,就能完成超详细的操作! 它不仅可以写代码,还能修复BUG、写广告文案! 可谓是风头出尽,甚至有不少前端工程师说:以前前端失业是玩笑,现在是陈述事实。 为了验证它的真实性,我
阅读全文
摘要:查看、校验、归档… 带你掌握 openGauss 账本数据库 自橙一派 于 2022-11-22 23:55:31 发布 86 收藏文章标签: 数据库版权账本数据库融合了区块链思想,将用户操作记录至两种历史表中:用户历史表和全局区块表。当用户创建防篡改用户表时,系统将自动为该表添加一个 hash 列
阅读全文