05 2023 档案

摘要:1、 使用源码编译安装:您可以从Python官方网站下载Python 3.9的源代码,并按照以下步骤进行编译和安装: 安装编译所需的依赖项: sudo yum install gcc openssl-devel bzip2-devel libffi-devel zlib-devel readline 阅读全文
posted @ 2023-05-24 10:01 Syw_文 阅读(663) 评论(0) 推荐(0) 编辑
摘要:create table lineitem ( l_orderkey bigint, l_partkey bigint, l_suppkey bigint, l_linenumber bigint, l_quantity decimal(15,2) , l_extendedprice decimal 阅读全文
posted @ 2023-05-24 09:53 Syw_文 阅读(45) 评论(0) 推荐(0) 编辑
摘要:执行的语法和命令如下: time clickhouse-client -h localhost -u default --password "root" --port 9000 -d tpch -q "select count(*) from customer;" 打印的结果显示如下: root@t 阅读全文
posted @ 2023-05-23 15:26 Syw_文 阅读(18) 评论(0) 推荐(0) 编辑
摘要:select l_returnflag, l_linestatus, sum(l_quantity) as sum_qty, sum(l_extendedprice) as sum_base_price, sum(l_extendedprice * (1 - l_discount)) as sum_ 阅读全文
posted @ 2023-05-23 15:01 Syw_文 阅读(105) 评论(0) 推荐(0) 编辑
摘要:select l_returnflag, l_linestatus, sum(l_quantity) as sum_qty, sum(l_extendedprice) as sum_base_price, sum(l_extendedprice * (1 - l_discount)) as sum_ 阅读全文
posted @ 2023-05-23 14:15 Syw_文 阅读(100) 评论(0) 推荐(0) 编辑
摘要:一、比较知名的工具(非完全免费) Trifacta:Trifacta:是一种自动数据质量检测和数据预处理工具,它使用机器学习算法来自动识别数据中的潜在问题,并建议数据清理操作。 Talend Data Quality:Talend Data Quality是一种数据质量和数据清理工具,它使用机器学习 阅读全文
posted @ 2023-05-10 20:01 Syw_文 阅读(334) 评论(0) 推荐(0) 编辑
摘要:评价数据质量测试的业务价值,需要从以下几个方面考虑: 数据质量的重要性:数据作为企业最重要的资产之一,对企业的业务决策、客户体验、营销效果等方面都有着深远的影响。因此,数据质量的问题可能导致企业业务的停滞甚至失败,从而造成重大的经济损失。通过数据质量测试可以发现数据的问题,及时进行修复和优化,提高数 阅读全文
posted @ 2023-05-10 20:00 Syw_文 阅读(26) 评论(0) 推荐(0) 编辑
摘要:(一)AI技术可以辅助测试人员完成数据质量的测试 数据异常检测:利用机器学习等技术,对数据进行异常检测,自动发现数据中的异常值、缺失值、重复值等问题。 数据匹配和去重:利用自然语言处理、模式识别等技术,对数据进行匹配和去重,自动发现重复的数据或者类似但不完全相同的数据。 数据质量分析:利用机器学习等 阅读全文
posted @ 2023-05-10 20:00 Syw_文 阅读(138) 评论(0) 推荐(0) 编辑
摘要:场景说明 在数据库查询中会常见cold run与hot run,hot run是指将同一个SQL连续运行多遍。 运行脚本创建一个run.sh直接复制如下脚本 - 注意修改数据库的连接IP与密码等- queries2.sql 存放查询的SQL,请将queries2.sql 文件与run.sh放在同一个 阅读全文
posted @ 2023-05-09 20:57 Syw_文 阅读(209) 评论(0) 推荐(0) 编辑
摘要:clickbench官网链接:https://benchmark.clickhouse.com/ 如下采用的数据库为分析型数据库支持MySQL协议,其他所有的数据库操作方法均类似 测试背景 利用clickhouse的clickbench测试数据与查询SQL对AtomData进行了性能测试,所有的测试 阅读全文
posted @ 2023-05-09 20:40 Syw_文 阅读(533) 评论(0) 推荐(0) 编辑
摘要:clickbench官网链接:https://benchmark.clickhouse.com/ 如下的内容讲解将以MySQL与starrocks的结果对比为示例 一、测试配置查看 查看配置链接:https://aws.amazon.com/cn/ec2/instance-types/ (所有的服务 阅读全文
posted @ 2023-05-08 11:56 Syw_文 阅读(227) 评论(0) 推荐(0) 编辑