Nineteen@newsmth

虚荣,那是我最爱的原罪~~
随笔 - 13, 文章 - 0, 评论 - 246, 引用 - 17
数据加载中……

写有效率的SQL查询(I)

大型系统的生产环境,一般情况下,我们评价一条查询是否有效率,更多的是关注逻辑IO(至于为什么,回头补一篇)。我们常说,“要建彪悍的索引”、“要写高效的SQL”,其实最终目的就是在相同结果集情况下,尽可能减少逻辑IO

1.1     where条件的列上都得有统计信息。

没统计信息SQLServer就无法估算不同查询计划开销优劣,而只能采用最稳妥的Scan(不管是table scan还是clustered index scan)。一般情况下我们不会犯这种错误——where条件里不使用非索引列是个常识。索引上的统计信息是无法删除的。

1.2     尽量不使用不等于(!=)或者NOT逻辑运算符。

这条规则被广为传颂,原因据联机文档和百敬同学的书讲,也是SQLServer无法评估不同查询计划开销的优劣。但是SqlServer2k5聪明了很多,试验发现尽管用了!=或者not,查询还是会被优化。如下:

create table tb1

(

    col1 int identity(1,1) primary key,

    col2 int not null,

    col3 varchar(64) not null

)

create index ix_tb1_col2 on tb1

(

    col2

)

create index ix_tb1_col3 on tb1

(

    col3

)

declare @f int

set @f = 0

while @f < 9999

begin

    insert into tb1 (col2, col3) values(1, 'ssdd')

    set @f = @f + 1

end

insert into tb1 (col2, col3) values(0, 'aadddd')

insert into tb1 (col2, col3) values(2, 'bbddd')

insert into tb1 (col2, col3) values(3, 'bbaaddddddaa')

通过上述代码,各位可以看到数据分布。col2值为1的有9999条;col2值为023的分别有1条。

按照本条规则,!= NOT带来的应该是个scan操作,但实际情况是:
   

SQL2k5很聪明,它依据统计信息分析得出来,应该采用index seek而不是index scan。(稍微解释解释index seekindex scan:索引是一颗B树,index seek是查找从B树的根节点开始,一级一级找到目标行。index scan则是从左到右,把整个B树遍历一遍。假设唯一的目标行位于索引树(假设是非聚集索引,树深度2,叶节点占用k页物理存储)最右的叶节点上(如上例)。index seek引起的IO4,而index scan引起的IOK,性能差别巨大。关于索引,可以仔细读读联机文档关于物理数据库体系结构部分)。

1.3     查询条件中不要包含运算

这些运算包括字符串连接(如:select * from Users where UserName + ‘pig’ = ‘张三pig’),通配符在前面的Like运算(如:select * from tb1 where col4 like ‘%aa’),使用其他用户自定义函数、系统内置函数、标量函数等等(如:select * from UserLog where datepart(dd, LogTime) = 3)。

         SQLServer在处理以上语句时,一样没办法估算开销。最终结果当然是clustered index scan或者table scan了。

1.4     查询条件中不要包含同一张表内不同列之间的运算

所谓的“运算”包括加减乘除或通过一些function(如:select * from tb where col1 – col2 = 1997),也包括比较运算(如:select * from tb where col1 > col2)。这种情况下,SQLServer一样没办法估算开销。不论col1col2上都有索引还是创建了col1col2上的覆盖索引还是创建了col1 include col2的索引。

但是这种查询有解决办法,可以在表上多创建一个计算字段,其值设置为你的“运算”结果,再在该字段上创建一个索引,就Ok了。

 

 

To Be Continue…

(II)中将介绍统计信息值分布不均匀对查询的影响和如何避免这些影响,捎带更多的说说返回多行结果时,为啥SQLServer有时会选择index seek,而有时会选择index scan。
(III)中主要介绍传说中的“Foldable”和“NonFoldable”表达式。并举例说说所谓的“Nonfoldable"表达式某些情况下也不是那么可怕。
(IV)中则主要说说在程序中执行SQL。如:安全性,拼SQL、参数化SQL和存储过程之间对DB来说有什么区别,参数化SQL的一些技巧。捎带着,会大概介绍介绍SQLServer的Buffer Pool

posted on 2007-08-03 16:23 Nineteen@newsmth 阅读(7364) 评论(20)  编辑 收藏 网摘

评论

#1楼   回复  引用  查看    

 很好的东西!支持!
请问你那个查看效率的工具是什么?
2007-08-03 17:01 | 钟天      

#2楼[楼主]   回复  引用  查看    

@钟天
查询分析器中首先执行set statistics io on,然后执行你要执行的语句。在“消息”中将显示各种IO。

回头偶补一篇分析DB性能瓶颈的文章。
2007-08-03 17:12 | Nineteen@newsmth      

#3楼   回复  引用    

好文!
2007-08-03 17:32 | zhou[未注册用户]

#4楼   回复  引用  查看    

好文!期待continue~
2007-08-03 19:07 | Anders Liu      

#5楼   回复  引用  查看    

写得很实在。
2007-08-03 19:29 | cnlamar      

#6楼   回复  引用  查看    

不错,当然除了SQL的效率之外,数据库的设计也很重要`~~
不过还是想听下视图的效率问题~
因为,开发中,不可避免的会遇到视图~~~
麻烦这方面也介绍下~
2007-08-03 23:22 | marxTen      

#7楼   回复  引用  查看    

收藏。。。。
2007-08-04 13:43 | 爱上北溟鸟      

#8楼   回复  引用    

貌似很像 百敬同学的那本书里的一章
2007-08-05 08:56 | Jade[未注册用户]

#9楼[楼主]   回复  引用  查看    

@Jade
值得注意的是1.2和1.4中描述。

1.2在sql 2k5中基本不适合。1.4印象中百敬同学没有讲吧。
2007-08-05 09:38 | Nineteen@newsmth      

#10楼   回复  引用  查看    

写得不错,但有个问题,文中提到这个不要,那个不要,但现实需求就是要做这样的处理,我们不可能为了效率而去砍需求吧。这样不等于跟客户说,对不起,这个不能做,那个也不能做嘛。
2007-08-08 10:41 | 文野      

#11楼   回复  引用  查看    

关注中 sql效率
2007-08-09 08:58 | 高海东      

#12楼   回复  引用    

1.2 中 在SQL2k中也是 index seek
为什么说 SQL2k5很聪明?
2007-08-09 10:44 | wangdotnet[未注册用户]

#13楼   回复  引用    

受益匪浅
2007-08-14 22:49 | 菜鸟张[未注册用户]

#14楼   回复  引用    

~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~ ——————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————————

#15楼   回复  引用  查看    

写得很实用.高手啊..
今天才看到你的文章,我将会继续看完你的这个系列。谢谢分享!!

2008-08-13 17:35 | haitian      

#16楼   回复  引用    

页面太宽了

我用22的都显示不开
2008-10-18 23:52 | 5270[未注册用户]

#17楼   回复  引用    

我们使用SYSBASE 和你的代码有点差距,不过我做与SQL有关 的工作,希望以后多交流,QQ:503942522
2008-11-24 17:12 | 008[未注册用户]

#18楼   回复  引用  查看    

谢谢楼主 不过下次能不能把页宽搞掉个把percent啊~
2009-01-08 13:02 | 胤祯之心      

#19楼   回复  引用    

写得不错,不过就是页面太宽了,拖得累....
2009-04-19 11:21 | knate[未注册用户]



发表评论

昵称: [登录] [注册]

主页:

邮箱:(仅博主可见)

评论内容:

  登录  注册

[使用Ctrl+Enter键快速提交评论]

0 841911




相关文章:

相关链接: