mysql group by执行原理
mysql中group by实现方式有三种,松散索引,紧凑索引,临时文件(文件排序)。
在网上看了相关的介绍,大部分介绍都比较晦涩难懂,这里说下我的理解。
在学习SQL优化时,我们都知道可以对group by进行优化的方式就是对group by引用的字段建立索引。当group by引用多个字段时,我们建立的相应的索引也应包含多个字段。
对group by操作优化的原理就是让mysql利用索引,而避免进行建立临时表,进而进行文件排序(group by的第三种实现方式)。
对于group by引用的多个字段,需满足于所建立索引的最左前缀索引,否则进行group by操作时,无法利用索引。在利用索引时,group by可根据索引,即可对数据分组,此时完全不用去
访问表的数据值(索引健对应的数据)。这种实现方式就是利用松散索引。
当group by引用的字段无法构成所建索引的最左前缀索引时,也就是说group by不能利用索引时。如何where语句(如果有的话)弥补了这种差距,比如:group by
引用的字段为(c2,c3),而索引为(c1,c2,c3)。此时如果where语句限定了c1=a(某一个值),那么此时mysql的执行过程为先根据where语句进行一次选择,
对选出来的结果集,可以利用索引。这种方式,从整体上来说,group by并没有利用索引,但是从过程来说,在选出的结果中利用了索引,这种方式就是紧凑索引。
这种方式,mysql的执行计划为using where,use index。而松散索引的执行计划为using index for group by。
如果mysql如论如何都不能利用索引时,此时mysql将读取所有的数据建立临时表,对文件进行排序,完成分组操作。
关于group的作用:
满足于我们针对某些字段进行分组,然后在组内对多行数据进行处理(计算行数,计算max,min等等)这样的需求。group by返回的数据是有序的。
如果我们对数据进行分组后,要输出(select)其所有(多)行的数据,此时是无法实现的。根据版本的不同,可能会输出第一行数据,可能会保错。
转:https://blog.csdn.net/qq403580298/article/details/90756352
写在前面的话:用了好久group by,今天早上一觉醒来,突然感觉group by好陌生,总有个筋别不过来,为什么不能够select * from Table group by id,为什么一定不能是*,而是某一个列或者某个列的聚合函数,group by 多个字段可以怎么去很好的理解呢?不过最后还是转过来了,简单写写吧,大牛们直接略过吧。
=========正文开始===========
先来看下表1,表名为test:
表1
执行如下SQL语句:
1
2
|
SELECT name FROM test GROUP BY name |
你应该很容易知道运行的结果,没错,就是下表2:
表2
可是为了能够更好的理解“group by”多个列“和”聚合函数“的应用,我建议在思考的过程中,由表1到表2的过程中,增加一个虚构的中间表:虚拟表3。下面说说如何来思考上面SQL语句执行情况:
1.FROM test:该句执行后,应该结果和表1一样,就是原来的表。
2.FROM test Group BY name:该句执行后,我们想象生成了虚拟表3,如下所图所示,生成过程是这样的:group by name,那么找name那一列,具有相同name值的行,合并成一行,如对于name值为aa的,那么<1 aa 2>与<2 aa 3>两行合并成1行,所有的id值和number值写到一个单元格里面。
3.接下来就要针对虚拟表3执行Select语句了:
(1)如果执行select *的话,那么返回的结果应该是虚拟表3,可是id和number中有的单元格里面的内容是多个值的,而关系数据库就是基于关系的,单元格中是不允许有多个值的,所以你看,执行select * 语句就报错了。
(2)我们再看name列,每个单元格只有一个数据,所以我们select name的话,就没有问题了。为什么name列每个单元格只有一个值呢,因为我们就是用name列来group by的。
(3)那么对于id和number里面的单元格有多个数据的情况怎么办呢?答案就是用聚合函数,聚合函数就用来输入多个数据,输出一个数据的。如cout(id),sum(number),而每个聚合函数的输入就是每一个多数据的单元格。
(4)例如我们执行select name,sum(number) from test group by name,那么sum就对虚拟表3的number列的每个单元格进行sum操作,例如对name为aa的那一行的number列执行sum操作,即2+3,返回5,最后执行结果如下:
(5)group by 多个字段该怎么理解呢:如group by name,number,我们可以把name和number 看成一个整体字段,以他们整体来进行分组的。如下图
(6)接下来就可以配合select和聚合函数进行操作了。如执行select name,sum(id) from test group by name,number,结果如下图:
至此,我已经对我自己对如此简单的问题有如此天马行空的想法所折服,洗洗睡觉。