MySQL追踪优化器小试

首先看一下MySQL追踪优化器的典型用法：

打开：

SET optimizer_trace="enabled=on";

查询优化器的信息：

SELECT * FROM INFORMATION_SCHEMA.OPTIMIZER_TRACE;

关闭：

SET optimizer_trace="enabled=off";

默认情况下是关闭的，要使用的时候一定要打开这个优化器。

看一下参数：

 

enabled：打开或者关闭跟踪器

one_line：如果ON的话将会以JOSN的存储方式保存跟踪，但是阅读的话就是比较费劲的，除了能节省空间没啥好处，不过还是建议使用这个方式。

看一下优化器的相关参数，也可以使用mysqld --verbose --help查看：

--optimizer-trace=name 控制优化的跟踪

--optimizer-trace-features=name Enables/disables tracing of selected features of the Optimizer: optimizer_trace_features=option=val[,option=val...], where option is one of {greedy_search, range_optimizer, dynamic_range, repeated_subselect} and val is one of {on, off, default}

--optimizer-trace-limit=# 显示优化追踪器的最大数量

--optimizer-trace-max-mem-size=# 存储优化的痕迹允许的最大尺寸累积

--optimizer-trace-offset=# Offset of first optimizer trace to show; see manual --end-markers-in-json=#

In JSON output ("EXPLAIN FORMAT=JSON" and optimizer trace), if set to 1, repeats the structure's key (if it has one) near the closing bracke

而且这个是和前面所说的information_schema.OPTIMIZER_TRACE表是相对应的

SET GLOBAL optimizer_trace="one_line=on";

打开追踪优化器

然后做一条操作就能看到具体的追踪优化器的信息了，通过以下的语句进行查询：

select * from information_schema.OPTIMIZER_TRACE\G;

看一下这张表的结构：

 

看一下字段信息：

QUERY ：查询语句

TRACE ：跟踪信息，是以JSON形式存储的

MISSING_BYTES_BEYOND_MAX_MEM_SIZE：

INSUFFICIENT_PRIVILEGES

追踪优化器可以跟踪很多信息，SELECT insert，replace（其值或选择） ; UPDATE / DELETE和multi-table variants;所有EXPLAIN前缀以前的; SET（除非它操纵optimizer_trace系统变量） ;做; DECLARE / CASE / IF / RETURN（存储程序语言元素） ;call。如果这些语句之一被制备并在分开的步骤中执行，preparation 和execution单独跟踪

一般情况下，一个新的跟踪都会覆盖掉以前的跟踪，特别是对于执行的语句，只能在最新的跟踪器中生成，老的跟踪器是不会产生的，这就是覆盖原则。所以我们需要对追踪优化器进行净化。看一下下面的语句：

SET optimizer_trace_offset=<OFFSET>, optimizer_trace_limit=<LIMIT>

通过上面的语句进行净化。optimizer_trace_offset和optimizer_trace_limit的默认值分别为-1和1.这个参数设置指的是什么呢：

1：当用户退出后所有的跟踪信息都会被清除

2：如果OFFSET 是大于0的相同的查询会返回到第一次查询的记录信息，OFFSET 是小于0的话这条记录就会被记录下来。

例如我们将设置以下信息的话：

OFFSET=-1 and LIMIT=1 最后一次查询信息将会被记录下来
OFFSET=-2 and LIMIT=1将会记录下一个到最后的查询信息
OFFSET=-5 and LIMIT=5 将会记录最后五次查询信息
OFFSET=0 and LIMIT=5 只会记录五次信息
OFFSET≥0的时候，内存中只会记录LIMIT调跟踪信息
SET optimizer_trace_offset=-5, optimizer_trace_limit=5;

多个语句执行N次N大于5在进行查询：

SELECT * FROM information_schema.OPTIMIZER_TRACE；

 

可以看到只是记录了最后的五条信息而已。

官网给出了建议的查询语句：

SELECT * FROM OPTIMIZER_TRACE LIMIT LIMIT OFFSET OFFSET ;

而且我们还可以通过以下语句监控到使用的内存到底是多少：

show variables like 'optimizer_trace_max_mem_size';

 

而且OPTIMIZER_TRACE表的MISSING_BYTES_BEYOND_MAX_MEM_SIZE这个列还会记录到当前语句丢失了多少内存，而我们通过show variables like 'optimizer_trace_max_mem_size';查找的内存使用信息往往是和真是的偏小一点，真实内存使用往往要高。

OPTIMIZER_TRACE表的INSUFFICIENT_PRIVILEGES是用来查看权限的，当一些复杂的语句，但是查看跟踪的用户缺少权限的时候，这列值往往将显示为1。这就表示其实是没有权限的。

而且要记住一点就是跟踪器的事件如果被记录下来的话，那么也是会被自动记录到 --debug file当中的.

我们知道跟踪器的话是以JOSN存储trace的，但是JOSN的格式是很难阅读的，所以说MySQL有了以下的参数：

end_markers_in_json这个变量：

root@localhost [information_schema]>show variables like 'end_markers_in_json';
+---------------------+-------+
| Variable_name | Value |
+---------------------+-------+
| end_markers_in_json | OFF |
+---------------------+-------+
1 row in set (0.01 sec)

下面设置以下setting @@end_markers_in_json=on;打开参数以后再去查询的话就会方便的多（这个参数是5.7特有的）：

 

或者我们使用EXPLAIN FORMAT=JSON也可以达到相同的结果。

那么问题来了，优化跟踪器有哪些特点呢，跟踪优化器可以避免多次跟踪同一个语句，这样就不会造成跟踪文件的疯狂增长。跟踪优化器主要有以下的特点：

懒查询：这样的话一个JOIN语句有N个表，最多只会产生N阶乘个执行计划

动态范围跟踪：只输出检查范围内的记录，范围内记录只会重新运行一次，但是没有运行过的记录就会重新生成一个计划。

子查询：每个字查询只会运行一次

这些功能我们是可以自己设置的：>show variables like 'optimizer_trace_features';

 

我们可以看一下跟踪的记录信息，可能会有点乱：

 

join-preparation 准备

join-optimization优化对象

join-execution最后执行

以及调用的范围内优化，成本评估，为什么选择在另一个的访问路径，为什么还是选择了另外一个排序方法，显示过的原因。距离显示一切都在发生优化远，但我们计划显示未来更多的信息。由于截图很乱，不知道你们看得到不，体验眼力劲的时候出现了。当然也可以通过前面的方式修改一下格式看一下可能更加的乐观。

我们最好将跟踪记录并且导出到文件，这样看起来更加好看

SELECT TRACE FROM INFORMATION_SCHEMA.OPTIMIZER_TRACE into outfile'/var/lib/mysql-files/dump.sql';

如果想要其他人看不到自己的跟踪信息，一定要记得打开以下的参数：

--maximum-optimizer-trace-max-mem-size=0 --optimizer-trace-max-mem-size=0