关系数据库的查询优化策略
1 引言
随着计算机应用技术的不断普及和发展,数据库系统正越来越多的走进人们的日常生
活。在要求查询结果正确无误的同时,人们越来越关心查询的效率问题。影响查询效
率的因素很多,诸如处理器的速度、I/O速度、存储器的容量、操作系统、采取何种的
数据库服务系统等。但是对于特定服务器来说查询的效率主要取决于DBA(数据库管理
员)所给定的查询语句。
2 合理使用索引
数据库服务器对数据进行访问一般采用下面的两种方式:① 索引扫描,通过索引访问
数据;②表扫描,读表中的所有页。当对一个表进行查询时,如果返回的行数占全表
总行数的10%到15%时,使用索引可以极大的优化查询的性能。但是如果查询涉及到全
表40%以上的行时,表扫描的效率比使用索引扫描的效率高。在具体使用的过程中,要
结合实际的数据库和用户的需求来确定要不要索引以及在什么字段上建立什么样的索
引。下面给出一些通用的规则:
1. 在经常用作过滤器或者查询频率较高字段上建立索引;
2. 在SQL语句中经常进行GROUP BY、ORDER BY的字段上建立索引;
3. 在不同值较少的字段上不必要建立索引,如性别字段;
4. 对于经常存取的列避免建立索引;
5. 用于联接的列(主健/外健)建立索引;
6. 在经常存取的多个列上建立复合索引,但要注意复合索引的建立顺序要按
照使用的频度来确定。
2.1 聚集索引
聚集索引是指行的物理顺序与行的索引顺序相同的索引。一个表只能有一个聚集索引
。非聚集索引是指定表的逻辑顺序的索引,行的物理顺序与索引顺序不尽相同,每个
表可以有多个非聚集索引。缺省情况下建立的是非聚集索引,但是在一些特定的情况
下建立非聚集索引会极大的缩短查询的时间。有大量重复值、且经常有范围查询
(between,>,<,>=,<=)和orderby、groupby发生的列,可考虑建立聚集索引,而对
于频繁修改的列、或者返回小数目的不同值的这些情况应该避免建立聚集索引。
使用聚集索引的最大好处就是能够根据查询要求,迅速缩小查询范围,避免全表扫描
。比如要返回2004 年4月1日到2004年10月1日之间的数据,如果在日期的字段建立了
聚集索引,那么数据本来就是按照日期的顺序排列的,只要找到开始和结尾日期的数
据就可以了,可以极大的节省时间。而如果使用非聚集索引,必须查到这个时间段中
每个日期对应的位置,然后在根据位置存取数据,明显效率很低。显而易见,使用聚
集索引的优势很明显。一个表只能按照一个固定的顺序来存储数据,因此,在建立聚
集索引的时候一定要和实际查询相结合,看哪个字段对于查询贡献大,而且操作不是
很频繁。
索引有助于提高检索性能,但过多或不当的索引也会导致系统低效。因为用户在表中
每添加一个索引,数据库就要做更多的工作。过多的索引甚至会导致索引碎片。所以
说,我们要合理使用索引体系,特别是对索引的创建,更应精益求精,使数据库的性
能得到更好的发挥。
3 书写高效的SQL语句
虽然特定的数据库服务器都会对输入的查询语句进行一定的优化操作,但是查询效率
主要取决于DBA所书写的SQL语句的好坏。为确保编写的SQL语句有较好的性能,应考虑
以下的优化方法:
⑴尽量减少使用负逻辑的操作符和函数,因为它们会导致全表扫描,而且容易出错。
可以把含有NOT、<> 、!= 等负逻辑的条件表达式转化为意思相当的正逻辑。
⑵字段提取要多少,取多少,避免使用“select *”格式,因为在数据量较大的时候
,影响查询性能的最大因素不在与数据的查找,而在于物理I/O的操作。
⑶避免使用LIKE、EXISTS、IN等标准表达式,他们会使字段上的索引无效,引起全表
扫描。尽量减少表的联接操作,不可避免的时候要适当增加一些冗余条件,使参与联
接的字段集尽量少。
⑷ OR会使字段上的索引失效,引起全表扫描。下面的例子中,可以把or子句分开,在
把结果做加法和算,也可以编写一个存储过程来避免索引的失效。
Select work-name, work-dept from work where work-id=’2’ or work-id=’3’;
⑸尽量减少使用联接字段而把所有的条件分列出来用and来进行连接,可以充分的利用
在某些字段上已经存在的索引。
select work-id from salary where work-salary||”|| work-dept=’$2000
teacher’ ;
如果把条件分开来写成下面的格式,系统的查询性能可以得到一定的提高。
select work-no from salary where work-salary=$2000 and work-dept=’ teacher
’;
⑹尽量避免使用相关的嵌套查询,
3.1 Where字句的影响
Where子句说明查询的条件,直接决定查询的性能。因此在where 子句的书写及应用中
要多加注意。书写where 子句时尽量避免使用不兼容的数据类型,避免对where 子句
中的条件参数使用其他的数学操作符,尽可能的把操作转化到式子的左边,这样可以
有效的利用已有的索引技术。对于where字句中的多个选择条件,要选取结果集小的先
执行。下面给出一些不规范书写。
select work-id from salary where work-salary>4000;
select work-id from salary where work-salary*2>$4000;
对于第一个查询来说,4000 是整数,而工人的工资时money格式的,系统在查询的时
候需要耗费时间来进行格式转化。对于第二个例子,任何在运算符左边的操作都会使
SQL采用全表扫描,对表中的每个数据项做相应的操作来比较是否满足条件,如果这个
字段有索引,则索引失效。因此上面两个例子最好可以写成下面的格式:
select work-no from salary where work-salary>$4000;
select work-no from salary where work-salary>$2000;
4 存储过程的使用
存储过程由SQL 语句和SPL语言的语句组成,创建后转换为可执行代码,作为数据库的一
个对象存储在数据库中,存储过程的代码驻留在服务器端,因而执行时不需要将应用程
序代码向服务器端传送,可以大大减轻网络负载,加快系统响应时间。同时,由于存储
过程已编译为可执行代码,不需要每次执行时进行分析和优化工作,从而减少了预处理
所花费的时间,提高了系统的效率。
在工程中,我们可以把经常用到的查询动作编写成一个存储过程,并利用参数实现动
态查询过程来响应客户的要求;可以实现在服务器端进行批量数据处理等操作;可以
使用存储过程作为强制安全性工具;还可以利用系统为用户定义的管理级别存储过程实
现数据的管理、配置和监控等。合理使用存储过程可以有效的提高系统效率。
5 视图的应用
利用视图不仅可以提高数据的保密性,方便的设置用户的权限,而且也可以提高数据
的精炼性。在DBMS 中有着许多不同的角色,他们对数据的要求是不同的,针对不同类
别的用户分别建立合适的视图,可以在有效的条件下提高数据的有用性,提高系统对
不同用户的查询响应时间。此外用户访问数据库一般要求得到的是最近的数据,比如
查询话费,最常用的数据是最近三个月的。因此在许多情况下,可以按照时间对数据
库中的数据进行水平分片,把最近一段时间的数据呈现给用户。当用户需要查找“过
期”数据时再把相应的块调进来。由于这种情况极少发生,在一定的情况下,可以有
效的减少数据量,缩小数据查找范围。使用这种方法要注意分区数据的维护,因此一
定要在权衡维护和查询代价的基础上确定是否要使用分片。如果经常要访问全库数据
进行综合对比的话,这种方法就不适用。
6 小结
关系数据库的优化是一个和实际数据库结构密切相关的问题,在实际应用中应该结合
具体的数据库服务器,深入的理解服务器的运作模式、资源配置,优化服务器的运行
环境,选择合适的操作系统,最大限度的发挥服务器的性能。
随着计算机应用技术的不断普及和发展,数据库系统正越来越多的走进人们的日常生
活。在要求查询结果正确无误的同时,人们越来越关心查询的效率问题。影响查询效
率的因素很多,诸如处理器的速度、I/O速度、存储器的容量、操作系统、采取何种的
数据库服务系统等。但是对于特定服务器来说查询的效率主要取决于DBA(数据库管理
员)所给定的查询语句。
2 合理使用索引
数据库服务器对数据进行访问一般采用下面的两种方式:① 索引扫描,通过索引访问
数据;②表扫描,读表中的所有页。当对一个表进行查询时,如果返回的行数占全表
总行数的10%到15%时,使用索引可以极大的优化查询的性能。但是如果查询涉及到全
表40%以上的行时,表扫描的效率比使用索引扫描的效率高。在具体使用的过程中,要
结合实际的数据库和用户的需求来确定要不要索引以及在什么字段上建立什么样的索
引。下面给出一些通用的规则:
1. 在经常用作过滤器或者查询频率较高字段上建立索引;
2. 在SQL语句中经常进行GROUP BY、ORDER BY的字段上建立索引;
3. 在不同值较少的字段上不必要建立索引,如性别字段;
4. 对于经常存取的列避免建立索引;
5. 用于联接的列(主健/外健)建立索引;
6. 在经常存取的多个列上建立复合索引,但要注意复合索引的建立顺序要按
照使用的频度来确定。
2.1 聚集索引
聚集索引是指行的物理顺序与行的索引顺序相同的索引。一个表只能有一个聚集索引
。非聚集索引是指定表的逻辑顺序的索引,行的物理顺序与索引顺序不尽相同,每个
表可以有多个非聚集索引。缺省情况下建立的是非聚集索引,但是在一些特定的情况
下建立非聚集索引会极大的缩短查询的时间。有大量重复值、且经常有范围查询
(between,>,<,>=,<=)和orderby、groupby发生的列,可考虑建立聚集索引,而对
于频繁修改的列、或者返回小数目的不同值的这些情况应该避免建立聚集索引。
使用聚集索引的最大好处就是能够根据查询要求,迅速缩小查询范围,避免全表扫描
。比如要返回2004 年4月1日到2004年10月1日之间的数据,如果在日期的字段建立了
聚集索引,那么数据本来就是按照日期的顺序排列的,只要找到开始和结尾日期的数
据就可以了,可以极大的节省时间。而如果使用非聚集索引,必须查到这个时间段中
每个日期对应的位置,然后在根据位置存取数据,明显效率很低。显而易见,使用聚
集索引的优势很明显。一个表只能按照一个固定的顺序来存储数据,因此,在建立聚
集索引的时候一定要和实际查询相结合,看哪个字段对于查询贡献大,而且操作不是
很频繁。
索引有助于提高检索性能,但过多或不当的索引也会导致系统低效。因为用户在表中
每添加一个索引,数据库就要做更多的工作。过多的索引甚至会导致索引碎片。所以
说,我们要合理使用索引体系,特别是对索引的创建,更应精益求精,使数据库的性
能得到更好的发挥。
3 书写高效的SQL语句
虽然特定的数据库服务器都会对输入的查询语句进行一定的优化操作,但是查询效率
主要取决于DBA所书写的SQL语句的好坏。为确保编写的SQL语句有较好的性能,应考虑
以下的优化方法:
⑴尽量减少使用负逻辑的操作符和函数,因为它们会导致全表扫描,而且容易出错。
可以把含有NOT、<> 、!= 等负逻辑的条件表达式转化为意思相当的正逻辑。
⑵字段提取要多少,取多少,避免使用“select *”格式,因为在数据量较大的时候
,影响查询性能的最大因素不在与数据的查找,而在于物理I/O的操作。
⑶避免使用LIKE、EXISTS、IN等标准表达式,他们会使字段上的索引无效,引起全表
扫描。尽量减少表的联接操作,不可避免的时候要适当增加一些冗余条件,使参与联
接的字段集尽量少。
⑷ OR会使字段上的索引失效,引起全表扫描。下面的例子中,可以把or子句分开,在
把结果做加法和算,也可以编写一个存储过程来避免索引的失效。
Select work-name, work-dept from work where work-id=’2’ or work-id=’3’;
⑸尽量减少使用联接字段而把所有的条件分列出来用and来进行连接,可以充分的利用
在某些字段上已经存在的索引。
select work-id from salary where work-salary||”|| work-dept=’$2000
teacher’ ;
如果把条件分开来写成下面的格式,系统的查询性能可以得到一定的提高。
select work-no from salary where work-salary=$2000 and work-dept=’ teacher
’;
⑹尽量避免使用相关的嵌套查询,
3.1 Where字句的影响
Where子句说明查询的条件,直接决定查询的性能。因此在where 子句的书写及应用中
要多加注意。书写where 子句时尽量避免使用不兼容的数据类型,避免对where 子句
中的条件参数使用其他的数学操作符,尽可能的把操作转化到式子的左边,这样可以
有效的利用已有的索引技术。对于where字句中的多个选择条件,要选取结果集小的先
执行。下面给出一些不规范书写。
select work-id from salary where work-salary>4000;
select work-id from salary where work-salary*2>$4000;
对于第一个查询来说,4000 是整数,而工人的工资时money格式的,系统在查询的时
候需要耗费时间来进行格式转化。对于第二个例子,任何在运算符左边的操作都会使
SQL采用全表扫描,对表中的每个数据项做相应的操作来比较是否满足条件,如果这个
字段有索引,则索引失效。因此上面两个例子最好可以写成下面的格式:
select work-no from salary where work-salary>$4000;
select work-no from salary where work-salary>$2000;
4 存储过程的使用
存储过程由SQL 语句和SPL语言的语句组成,创建后转换为可执行代码,作为数据库的一
个对象存储在数据库中,存储过程的代码驻留在服务器端,因而执行时不需要将应用程
序代码向服务器端传送,可以大大减轻网络负载,加快系统响应时间。同时,由于存储
过程已编译为可执行代码,不需要每次执行时进行分析和优化工作,从而减少了预处理
所花费的时间,提高了系统的效率。
在工程中,我们可以把经常用到的查询动作编写成一个存储过程,并利用参数实现动
态查询过程来响应客户的要求;可以实现在服务器端进行批量数据处理等操作;可以
使用存储过程作为强制安全性工具;还可以利用系统为用户定义的管理级别存储过程实
现数据的管理、配置和监控等。合理使用存储过程可以有效的提高系统效率。
5 视图的应用
利用视图不仅可以提高数据的保密性,方便的设置用户的权限,而且也可以提高数据
的精炼性。在DBMS 中有着许多不同的角色,他们对数据的要求是不同的,针对不同类
别的用户分别建立合适的视图,可以在有效的条件下提高数据的有用性,提高系统对
不同用户的查询响应时间。此外用户访问数据库一般要求得到的是最近的数据,比如
查询话费,最常用的数据是最近三个月的。因此在许多情况下,可以按照时间对数据
库中的数据进行水平分片,把最近一段时间的数据呈现给用户。当用户需要查找“过
期”数据时再把相应的块调进来。由于这种情况极少发生,在一定的情况下,可以有
效的减少数据量,缩小数据查找范围。使用这种方法要注意分区数据的维护,因此一
定要在权衡维护和查询代价的基础上确定是否要使用分片。如果经常要访问全库数据
进行综合对比的话,这种方法就不适用。
6 小结
关系数据库的优化是一个和实际数据库结构密切相关的问题,在实际应用中应该结合
具体的数据库服务器,深入的理解服务器的运作模式、资源配置,优化服务器的运行
环境,选择合适的操作系统,最大限度的发挥服务器的性能。