摘要: 1. 慢SQL 1.1 定位慢SQL(慢查询日志) 在mysql 配置文件中 (my.conf),进行下面配置,修改配置后重启mysql生效。 # 开启或关闭慢查询日志 slow_query_log = ON # 慢查询记录时间阈值,SQL执行超过此时间则会被记录到日志(单位:秒,默认10秒)。 l 阅读全文
posted @ 2026-01-31 09:07 每天进步多一点 阅读(28) 评论(0) 推荐(0)
摘要: read_buffer_size = 16M MyISAM 表顺序扫描的缓存大小,如果要经常顺序扫描 MyISAM 表,可以通过增大 read_buffer_size 的值来改善性能,但是这个变量是每会话独占,如果设置太大,会造成内存浪费,甚至物理内存耗尽。 在以下场景中适用于所有的存储引擎 此选项 阅读全文
posted @ 2026-01-24 10:07 每天进步多一点 阅读(6) 评论(0) 推荐(0)
摘要: MySQL COALESCE 函数使用详解 COALESCE 是 MySQL 中一个非常有用的函数,用于返回参数列表中的第一个非 NULL 值。下面详细介绍它的用法和示例。 基本语法 COALESCE(value1, value2, ..., valueN) 功能说明 函数从左到右依次检查每个参数 阅读全文
posted @ 2025-12-31 20:36 每天进步多一点 阅读(54) 评论(0) 推荐(0)
摘要: 多表join问题SQL 对于某个复杂业务场景,通常需要根据多个过滤条件才能拿到两个表中的信息。例如,某开发同事费了半天劲写了一个多表join的SQL实现了功能,但上线后却发现对应接口响应特别慢,通过一步步排查后才定位到问题SQL,SQL如下: select cell.*, res.pod_name 阅读全文
posted @ 2025-12-31 20:20 每天进步多一点 阅读(22) 评论(0) 推荐(0)
摘要: 一.场景案例在介绍具体内容之前,我们先来看个模拟的案例: device表(id,device_name,device_type,time)有10万条数据,device_type有50种,device_name有5万种,这两个字段均没有索引。 分别按照device_name与device_type进行 阅读全文
posted @ 2025-12-31 20:11 每天进步多一点 阅读(31) 评论(0) 推荐(0)
摘要: 1 using System; 2 using System.IO; 3 using System.Text; 4 using System.Diagnostics; 5 using System.Web.Security; 6 using System.Security; 7 using Syst 阅读全文
posted @ 2025-12-31 19:59 每天进步多一点 阅读(9) 评论(0) 推荐(0)
摘要: -- 定义函数,其索引名称为 tbl_name_col_name CREATE DEFINER=`root`@`%` PROCEDURE `create_index_if_not_exists`(in tbl_name varchar(64), in col_name varchar(64)) be 阅读全文
posted @ 2025-12-31 19:45 每天进步多一点 阅读(15) 评论(0) 推荐(0)
摘要: --当天的0点0分0秒,当天的23点59分59秒 select convert(datetime,convert(varchar(10),getdate(),120)) as a, dateadd(ss,-1,dateadd(dd,1,convert(datetime,convert(varchar 阅读全文
posted @ 2025-12-02 08:55 每天进步多一点 阅读(10) 评论(0) 推荐(0)
摘要: 数据抽取是指从源数据源系统抽取需要的数据。实际应用中,数据源较多采用的是关系数据库。总体而言,数据抽取的常见方法有两大类,一是基于查询式的,一是基于日志的。 基于查询式的数据抽取 基于查询式的数据抽取,顾名思义,以从来源库来源表查询数据为主。总体又有几种:触发器方式,增量字段方式,时间戳方式等等。 阅读全文
posted @ 2025-11-29 09:32 每天进步多一点 阅读(12) 评论(0) 推荐(0)
摘要: ETL的过程 1、数据抽取:确定数据源,定义数据接口,选择数据抽取方法(主动抽取或由源系统推送)。2、数据清洗:处理不完整数据、错误数据、重复数据等,确保数据的准确性和一致性。(是数据转换的一部分)3、数据转换:进行空值处理、数据标准统一、数据拆分、数据验证、数据替换和数据关联等操作。4、规则检查: 阅读全文
posted @ 2025-11-29 09:24 每天进步多一点 阅读(33) 评论(0) 推荐(0)