质量数据采集到的是原始的数据，由于数据质量规则众多，所以每一种规则采集到的原始数据可能都不一样，所以还需要对原始的数据做归一化处理，然后才能进行入库存储 ...
Daph源码位于gitee，地址是https://gitee.com/dasea96/daph 概述 Daph的中文名称是大副，大副是职位仅低于船长的船舶驾驶员，甲板部（驾驶部）负责人，船长的主要助手。 Daph的英文名称，取自【有向无环图Directed Acyclic Graph】的第一个字母与 ...
转载自神龙大侠 生产环境部署方案 在企业线上生产环境中，普遍的做法是至少实施两套环境。 测试环境 线上环境 测试环境用于验证代码的正确性，当测试环境验证ok后才会部署线上环境。 鉴于CI/CD应用的普遍性，源代码一键部署是必要的。 本文是探索对DolphinScheduler源代码改造，构建测试，线 ...
随着数据集成需求的增长，Apache SeaTunnel作为新一代的数据同步引擎，不仅在技术架构上不断演进，也在AI领域展现出其独特的应用价值。在CommunityOverCode Asia 2024大会上，Apache SeaTunnel PMC Chair 高俊 深入探讨SeaTunnel的技术 ...
使用GaussDB数据库进行测试 创建下面表，仅有一个字段a为integer类型。声明其为主键，数据库会默认为其建立索引。 create table t1( a int PRIMARY KEY ); 使用\d+查看表结构： gaussdb=# \d+ t1 Table "public.t1" Col ...
《数据资产管理核心技术与应用》是清华大学出版社出版的一本图书，全书共分10章，第1章主要让读者认识数据资产，了解数据资产相关的基础概念，以及数据资产的发展情况。第2～8章主要介绍大数据时代数据资产管理所涉及的核心技术，内容包括元数据的采集与存储、数据血缘、数据质量、数据监控与告警、数据服务、数据权限 ...
[20240824]跟踪library cache lock library cache pin使用gdb.txt--//这几天一直想写一个gdb脚本实现这个功能,先开始自己尝试,遇到一些问题,冷静下来看了以前的学习笔记,网上查了相关链接,能找到--//的资源很少:--//https://nenad ...
以上就是我所要导入的Excel模板。 需求重点 经过这次需求的实现,发现这个需求最难的点 就在 模板模板模板！ 模板中数据的关系，理清楚思路 模板中的数据，到底是多sheet还是说有合并单元进行导入 实现感悟 不管是多个sheet、还是说合并单元格、最重要的思想都是说将Excel中的数据进行拼接为一 ...
《数据资产管理核心技术与应用》是清华大学出版社出版的一本图书，全书共分10章，第1章主要让读者认识数据资产，了解数据资产相关的基础概念，以及数据资产的发展情况。第2～8章主要介绍大数据时代数据资产管理所涉及的核心技术，内容包括元数据的采集与存储、数据血缘、数据质量、数据监控与告警、数据服务、数据权限... ...
Percona Toolkit 神器全攻略（开发类） Percona Toolkit 神器全攻略系列共八篇，前文回顾： 前文回顾 Percona Toolkit 神器全攻略 Percona Toolkit 神器全攻略（实用类） Percona Toolkit 神器全攻略（配置类） Percona T ...
作者 | 白鲸开源CEO 郭炜 我作为一个具有30+游龄而20年+都不碰游戏的游戏玩家，最近为了《黑神话:悟空》（简称，黑悟空），不但花重金更新了显卡，还第一次下载了Steam并绑定了支付，为的就是支持这个第一次走出国门的3A游戏大作。 因为，我在《黑悟空》3A作品诞生的经历里，看到了中国软件创业者 ...
作者 | Chao Tian (tyrantlucifer)，Apache SeaTunnel PMC Member 摘要 Apache SeaTunnel作为一个高性能数据同步工具，以其高效的数据处理能力，为数据集成领域带来了创新。在引擎上，Apache SeaTunnel除了支持自身的Zeta引 ...
引言 Apache DolphinScheduler的发版流程对于确保软件质量和社区协作至关重要，社区Committer王兴杰为我们详细介绍了Apache DolphinScheduler的发版流程，包括环境准备、流程文档、基础工具准备、依赖包确认等关键步骤，并指出了发版流程中可能会遇到的麻烦以及相 ...
独家揭秘丨GreatSQL 的MDL锁策略升级对执行的影响 一、MDL锁策略介绍 GreatSQL 的MDL锁有个策略方法类MDL_lock_strategy，它根据对象的类型分为了scope类型和object类型，前者主要用于GLOBAL, COMMIT, TABLESPACE, BACKUP_L ...
MySQL Shell 中的提示符的样式和格式可以根据使用者的需求进行定制。我们可以配置提示符以显示有关数据库连接和使用的模式的不同或简化信息。本文将展示如何添加视觉提示，让您知道何时连接到生产数据库。 设置步骤既然您正在阅读关于自定义 MySQL Shell 的内容，您应该已经安装了它。如果没有， ...
[20240818]测试21c下sqlplus show recyclebin的小问题2.txt--//以前测试过,链接[20210722]sqlplus下show recycebin的小问题.txt--//注:recycebin 拼写错误 应该是 recyclebin.--//这个问题当时也是浪费 ...
mysql.user这个系统表中有些字段的数据是不准确的(或者说是不一定准确，这样表达更严谨一点)。这是一个让人头疼的问题，下面简单述说一下问题，主要是mysql.user表中的password_lifetime,password_reuse_history,password_reuse_time这 ...
记录开启本篇的目的: 作为1名练习时长2年半的DBA，工作大部分时间都在和数据库打交道，包括Oracle,Mysql,Postgresql,Opengauss等国内外数据库。但是对数据库的发展史却知之甚少。 正好腾讯云开发者社区正在热播:【纪录片】中国数据库前世今生,借此机会了解数据库发展历史，和演 ...
总之，在选择是否使用缓存及其设计时，需要根据业务场景和数据一致性要求进行权衡。缓存应主要用于提升读操作性能，而对于写多读多且对一致性要求高的场景，可能需要依赖数据库本身的能力或采用其他策略来处理数据的一致性问题。 ...
尽管我们在本文中只触及了数据库的基础部分，实际应用中可能会遇到更复杂的业务逻辑和需求。这些复杂的场景通常需要深入了解更多高级特性和技巧。虽然这些内容超出了本文的范围，但掌握基本操作是迈向高级技能的第一步。希望通过这篇文章，你能够对数据库有一个清晰的认识，并在实际工作中熟练运用这些基本操作。未来，随着... ...
