Syw

摘要： 测试的大数据量场景已2T为例进行介绍如下: （1）数据抽样验证：由于数据量非常大，可以采用数据抽样的方式进行验证。从数据集中随机抽取一小部分数据进行测试和验证，以此来推断整个数据集的正确性。 （2）并行计算验证：可以采用并行计算的方式进行验证，将数据集分成多个部分进行计算，然后将结果汇总。这样可以大 阅读全文

摘要： 保障ETL过程的数据正确性可以从以下几个方面考虑： 数据源的质量：ETL过程的数据质量取决于数据源的质量，因此需要对数据源进行充分的验证和清洗，确保数据的准确性、完整性和一致性。 数据转换的准确性：在ETL过程中，数据转换是非常重要的一步，需要确保数据转换的准确性和正确性。可以采用数据验证、数据重复 阅读全文

摘要： 支持insert和批量insert，待研究怎么设置 一、建表 （1）默认表名为usertable CREATE TABLE usertable ( YCSB_KEY VARCHAR(255) PRIMARY KEY, FIELD0 TEXT, FIELD1 TEXT, FIELD2 TEXT, FI 阅读全文

摘要： 一、工具介绍 YCSB 于 2010 年开源，YCSB是雅虎开源的NoSQL测试工具，用java开发实现，通常用来对noSQL数据库进行性能，注意此工具仅支持varchar和text类型，且列的长度可以增加，默认是10列，可以根据自己的需要增加列长。运行一个压力测试需要 6 步： 配置需要测试的数据 阅读全文

摘要： 一、RTO/RPO 对于分布式数据库而言，高可用是一个专业名词，其是系统的一个特性，保障系统能在足够长的时间内提供指定程度的服务,衡量数据库系统的可用性用RTO和RPO； （1）RTO（Recovery Time Obejective,恢复时间指标）：故障恢复过程中所需的时间花费。故障发生后，从IT 阅读全文

摘要： 云原生数据库：是指通过云平台进行构建、部署、交付和自动运维的数据库服务。该服务通过是已DBass（Database as a service）的形态，将数据库架构和实现细节隐藏起来，采用多租户和资源有效分发的形式将云资源自动管理起来，为用户提供一个能够满足弹性伸缩、高可用、高可靠、高安全性、强一致性 阅读全文

摘要： 针对下面的内容，可以区分单线程和多线程的测试，同时针对每个维度的测试，建议执行3次，并取测试结果的平均值作为对比维度。 测试维度 测试SQL '='等于查询（根据主键） | SELECT * from test WHERE id='菜鸟教程'; | '='等于查询（根据根据唯一键） | SELECT 阅读全文

摘要： 在平时的数据库性能测试中，我们也需要关注一下服务器所使用的文件系统类型，因此介绍Linux常用的文件系统类型及常见文件系统的特性。 文件系统的主要特点 1、数据可以长期保存在计算机外存上，可以对数据进行反复处理，并支持文件的查询、修改、插入和删除等操作。2、文件系统实现了记录内的结构化，但从文件的整 阅读全文

摘要： 介绍稳定性指标RTO与RPO 首先讲起稳定性都会提到两个指标RTO与RPO： RTO：恢复所需的时间指标。是反映业务恢复及时性的指标。表示业务从中断到恢复正常所需的时间。RTO值越小，代表容灾系统的数据恢复能力越强。各种容灾解决方案的RTO有较大差别 RPO：能够恢复到的最新状态。反映恢复数据完整性 阅读全文

摘要： （1）SQL示例如下，要将如下的SQL查询结果导出到一个txt文件，便于研发做结果内容的核对 select ps_partkey, sum(ps_supplycost * ps_availqty) as value from partsupp, supplier, nation where ps_s 阅读全文