Sql Server之旅——第四站 你必须知道的非聚集索引扫描

  

  非聚集索引,这个是大家都非常熟悉的一个东西,有时候我们由于业务原因,sql写的非常复杂,需要join很多张表,然后就泪流满面了。。。这时候就

有DBA或者资深的开发给你看这个猥琐的sql,通过执行计划一分析。。。或许就看出了不该有的表扫描。。。万恶之源。。。然后给你在关键的字段加上非

聚集索引后。。。才发现提速比阿斯顿马丁还要快。。。那么一个问题来了,为什么非聚集索引能提速这么快。。。怎么做到的???是不是非常的好奇???

这篇我们来解开神秘面纱。

一:现象

先让我们一睹非聚集索引的真容,看看到底在执行计划看来是个什么玩意。。。我这里有个product表,里面灌了8w多数据,然后在Name列上建立

一个非聚集索引,就像下图一样:

  

从上图中看到了两个好玩的东西,一个就是我想看到的“索引查找[nonclustered]”,这个大家很熟悉,也是这篇要说的,然后我们还看到了一个“RID查找”,

乍一看这是什么鸡巴玩意。。。非聚集索引跟它扯上什么关系了???

二:什么是RID

  通过前面几篇,我想大家都知道了数据页中的记录是如何寻找的?秘密就是通过slot槽位中的偏移量决定的,那问题来了,如果上升到数据页层面,我

只需要(pageID:slotID)就可以找到记录了,对不对?那如果我上升了文件层面,那是不是只需要知道(fileID:pageID:slotID)就可以找到数据页中的

记录了?其实这里的RID就是站在文件的高度通过(fileID:pageID:slotID)找到表记录的。。。既RID=RowID=(fileID:pageID:slotID),如果你非要眼见

为实的话,在sq中l还真提供了这么个函数(sys.fn_PhysLocFormatter(%%physloc%%)),我们看下图:

看了上面的图,是不是很兴奋,一目了然,比如productID=18088这条记录,然来是在1号文件,34941号数据页,0号槽位上,productID=18089

是在1号槽位上,好了,当你知道RID是个什么东西的时候,我想你已经离彻底理解非聚集索引不远啦。。。

三:非聚集索引

  有一点我们肯定知道,就是非聚集索引是可以加速查找的,要是跟表扫描那样的龟速,那也就失去了索引的目的,既然能加速,是因为它和聚集索

引一样,在底层都玩起了B树,首先我们插入一些样例数据。

 1 DROP TABLE dbo.Person
 2
 3 CREATE TABLE Person(ID INT IDENTITY,NAME CHAR(900))
 4 CREATE  INDEX idx_Person_Name ON dbo.Person(Name)
 5
 6 DECLARE @ch AS INT=97
 7
 8 WHILE @ch<=122
 9 BEGIN
10     INSERT INTO dbo.Person VALUES(REPLICATE(CHAR(@ch),5))
11     SET @ch=@ch+1
12 END

上面的sql,我故意在Name列设置为900个char,这也是索引的上限值,这样的话,我DBCC就可以导出很多数据页和索引页了。

可以看到,当我dbcc ind 的时候,发现Person表中已经有4个数据页,5个索引页,其中151号数据页是表跟踪页,174号为索引跟踪页,这也就

说明当我建立索引后,引擎给我们分配了专门的索引页来存放我们建立的Name索引,那下一步就是我们来看看这些索引中都存放着什么,这也是我

非常关心的,接下来我导出173号索引页。

1 DBCC PAGE(Ctrip,1,173,1)

 1 Slot 0, Offset 0x60, Length 912, DumpStyle BYTE
 2
 3 Record Type = INDEX_RECORD           Record Attributes =  NULL_BITMAP     Record Size = 912
 4
 5 Memory Dump @0x000000000EF1C060
 6
 7 0000000000000000:   16616161 61612020 20202020 20202020 †.aaaaa
 8 0000000000000010:   20202020 20202020 20202020 20202020 †
 9 0000000000000020:   20202020 20202020 20202020 20202020 †
10 0000000000000030:   20202020 20202020 20202020 20202020 †
11 0000000000000040:   20202020 20202020 20202020 20202020 †
12 0000000000000050:   20202020 20202020 20202020 20202020 †
13 0000000000000060:   20202020 20202020 20202020 20202020 †
14 0000000000000070:   20202020 20202020 20202020 20202020 †
15 0000000000000080:   20202020 20202020 20202020 20202020 †
16 0000000000000090:   20202020 20202020 20202020 20202020 †
17 00000000000000A0:   20202020 20202020 20202020 20202020 †
18 00000000000000B0:   20202020 20202020 20202020 20202020 †
19 00000000000000C0:   20202020 20202020 20202020 20202020 †
20 00000000000000D0:   20202020 20202020 20202020 20202020 †
21 00000000000000E0:   20202020 20202020 20202020 20202020 †
22 00000000000000F0:   20202020 20202020 20202020 20202020 †
23 0000000000000100:   20202020 20202020 20202020 20202020 †
24 0000000000000110:   20202020 20202020 20202020 20202020 †
25 0000000000000120:   20202020 20202020 20202020 20202020 †
26 0000000000000130:   20202020 20202020 20202020 20202020 †
27 0000000000000140:   20202020 20202020 20202020 20202020 †
28 0000000000000150:   20202020 20202020 20202020 20202020 †
29 0000000000000160:   20202020 20202020 20202020 20202020 †
30 0000000000000170:   20202020 20202020 20202020 20202020 †
31 0000000000000180:   20202020 20202020 20202020 20202020 †
32 0000000000000190:   20202020 20202020 20202020 20202020 †
33 00000000000001A0:   20202020 20202020 20202020 20202020 †
34 00000000000001B0:   20202020 20202020 20202020 20202020 †
35 00000000000001C0:   20202020 20202020 20202020 20202020 †
36 00000000000001D0:   20202020 20202020 20202020 20202020 †
37 00000000000001E0:   20202020 20202020 20202020 20202020 †
38 00000000000001F0:   20202020 20202020 20202020 20202020 †
39 0000000000000200:   20202020 20202020 20202020 20202020 †
40 0000000000000210:   20202020 20202020 20202020 20202020 †
41 0000000000000220:   20202020 20202020 20202020 20202020 †
42 0000000000000230:   20202020 20202020 20202020 20202020 †
43 0000000000000240:   20202020 20202020 20202020 20202020 †
44 0000000000000250:   20202020 20202020 20202020 20202020 †
45 0000000000000260:   20202020 20202020 20202020 20202020 †
46 0000000000000270:   20202020 20202020 20202020 20202020 †
47 0000000000000280:   20202020 20202020 20202020 20202020 †
48 0000000000000290:   20202020 20202020 20202020 20202020 †
49 00000000000002A0:   20202020 20202020 20202020 20202020 †
50 00000000000002B0:   20202020 20202020 20202020 20202020 †
51 00000000000002C0:   20202020 20202020 20202020 20202020 †
52 00000000000002D0:   20202020 20202020 20202020 20202020 †
53 00000000000002E0:   20202020 20202020 20202020 20202020 †
54 00000000000002F0:   20202020 20202020 20202020 20202020 †
55 0000000000000300:   20202020 20202020 20202020 20202020 †
56 0000000000000310:   20202020 20202020 20202020 20202020 †
57 0000000000000320:   20202020 20202020 20202020 20202020 †
58 0000000000000330:   20202020 20202020 20202020 20202020 †
59 0000000000000340:   20202020 20202020 20202020 20202020 †
60 0000000000000350:   20202020 20202020 20202020 20202020 †
61 0000000000000360:   20202020 20202020 20202020 20202020 †
62 0000000000000370:   20202020 20202020 20202020 20202020 †
63 0000000000000380:   20202020 20940000 00010000 00020000 †     ........... 
1 Row - Offset
2 7 (0x7) - 6480 (0x1950)
3 6 (0x6) - 5568 (0x15c0)
4 5 (0x5) - 4656 (0x1230)
5 4 (0x4) - 3744 (0xea0)
6 3 (0x3) - 2832 (0xb10)
7 2 (0x2) - 1920 (0x780)
8 1 (0x1) - 1008 (0x3f0)
9 0 (0x0) - 96 (0x60)     

从上面至少可以发现三个有趣的现象:

<1>:173号索引页中slot0和slot1槽位指向记录的内容已经有序了,比如:aaaaa,bbbbb。。。。这样。。。。原来非聚集索引也是有序呀。。。

<2>:6161616161就是16进制的aaaaa。

    9400000001000000 :这几个数字非常重要,因为是16进制表示,所以2位16进制表示一个字节,所以可以这么解释,前面4个字节表示

    pageID,中间2个字节表示fileID,后面2个字节表示slot,看到这里你是不是想起了RID。。。因为RID就是这三样的组合。。。原来非聚集索

   引的记录存放的就是“key+RowID”呀。。。。

<3>:通过最后的槽位列表,可以得知173号索引页上存放着8条索引记录。

  好了,看完了叶子节点,我们再看分支节点,也就是IndexLevel=1的那条索引数据页,也就是78号。ok,dbcc看看吧。

当看到这个列表的时候,不知道你脑子里面是不是有一幅图出来了,就像上一篇看到聚集索引一样,因为它的结构和聚集索引非常像,只不过

非聚集索引这里多了一个RID而已。。。最后我也把图贡献一下。

总结一下:在走非聚集索引的时候,比如你的条件是where name=‘jjjjj‘ 时,它的逻辑是这样的,根据78号索引数据页的key的范围,然后通过

      rowid走到了79号索引数据页,然后在79号索引数据页中顺利的找到了jjjjj,这时候就可以拿出jjjjj的rowid去表数据页中直接定位记录,

      最后输出。。。。。这个也就是博客开头的地方为什么会出现RID的查找。。。

时间: 2024-08-05 11:18:21

Sql Server之旅——第四站 你必须知道的非聚集索引扫描的相关文章

Sql Server之旅——第三站 解惑那些背了多年聚集索引的人

说到聚集索引,我想每个码农都明白,但是也有很多像我这样的猥程序员,只能用死记硬背来解决这个问题,什么表中只能建一个聚集索引, 然后又扯到了目录查找来帮助读者记忆....问题就在这里,我们不是学文科,,,不需要去死记硬背,,,我们需要的就是能看到在眼里面的 真实东西.....我们都喜欢聚集索引,因为它能够把无序的堆表记录变成有序,还玩起了B树...这样就把复杂度从N降低到了LogMN... 这样的话逻辑读,物理读就下来了. 一:现象 1:无索引的情况 还是老规矩,看个例子感受下,首先我有一个Pro

Sql Server之旅——第十一站 简单说说sqlserver的执行计划

原文:Sql Server之旅--第十一站 简单说说sqlserver的执行计划 我们知道sql在底层的执行给我们上层人员开了一个窗口,那就是执行计划,有了执行计划之后,我们就清楚了那些烂sql是怎么执行的,这样 就可以方便的找到sql的缺陷和优化点. 一:执行计划生成过程 说到执行计划,首先要知道的是执行计划大概生成的过程,这样就可以做到就心中有数了,下面我画下简图: 1. 分析过程 这三个比较容易理解,首先我们要保证sql的语法不能错误,select和join的表是必须存在的,以及你是有执行

Sql Server之旅——第七站 为什么都说状态少的字段不能建索引

我们在学sqlserver的时候,大多教科书和前辈们都说状态少的字段不要建索引,由此带来的开销还不如不建索引,但是这句话有多少人真的知道, 或者说有多少人真的对此有比较深刻的理解,而不是听别人道听途说...这样记得快,忘记的也不慢...这篇我来分析一下这句话到底有几个意思. 一:现象 首先我们还是用测试数据来发现问题,我先建立一个Person,有5个字段,建表sql如下: DROP TABLE dbo.Person CREATE TABLE Person(ID INT PRIMARY KEY I

Sql Server之旅——第五站 确实不得不说的DBCC命令

今天研发中心办年会,晚上就是各自部门聚餐了,我个人喜欢喝干红,在干红中你可以体味到那种酸甜苦辣...人生何尝不是这样呢???正好 ceo从美国带了干红回来,然后我就顺道开心的过了把瘾....一个字...爽....喝着有点多...到现在头还疼....回来地铁上想这个 周末忙着找房子,书一点都没看,也没在博客上接着忽悠,想起了上篇博客有个哥们说普及普及DBCC,虽然有点迷迷糊糊的...看能不能写出点新 花样....不管学什么语言,还是数据库,你得看的比人家深一层...最可悲的就是停留的在表层,这样每

Sql Server之旅——第八站 复合索引和include索引到底有多大区别?

周末终于搬进出租房了,装了宽带....才发现没网的日子...那是一个怎样的与世隔绝呀...再也受不了那样的日子了....好了,既然网 安上去了,还得继续我的这个系列. 索引和锁,这两个主题对我们开发工程师来说,非常的重要...只有理解了这两个主题,我们才能写出高质量的sql语句,在之前的博客中,我所说的 索引都是单列索引...当然数据库不可能只认单列索引,还有我这篇的复合索引,说到复合索引,可能熟悉的人又会说到include索引,那这两个索引到底 有什么区别呢,当然我也是菜鸟一枚...所以下面的

Sql Server之旅——第十三站 对锁的初步认识

终于这个系列快结束了,马上又要过年了,没什么心情写博客...作为一个开发人员,锁机制也是我们程序员必须掌握的东西,很久之前 在学习锁的时候,都是教科书上怎么说,然后我怎么背,缺少一个工具让我们眼见为实...如果这样的话,学习一个东西就很容易忘记... 因为这些都是你背诵过来的...这篇的话我就来分享一个工具来帮助我们学习锁. 一:到底都有哪些锁 学习锁之前,必须要知道锁大概有几种???通常情况下作为码农我们只需知道如下几个锁即可... 1.S(Share)锁 为了方便理解,我们可以直接这么认为,

Sql Server之旅——第十站 看看DML操作对索引的影响

我们都知道建索引是需要谨慎的,当只有利大于弊的时候才适合建,我们也知道建索引是需要维护成本的,这个维护也就在于DML操作了, 下面我们具体看看到底DML对索引都有哪些内幕.... 一:delete操作 现在我们已经知道,索引都是以B树的形式存在的,既然是B树,我们就要看看他们的叶子节点和分支结点,先准备点测试数据,如下图: CREATE TABLE Person(ID INT,NAME CHAR(200)) CREATE INDEX idx_Name ON Person(NAME) DECLAR

Sql Server之旅——第六站 使用winHex利器加深理解数据页

这篇我来介绍一个winhex利器,这个工具网上有介绍,用途大着呢,可以用来玩数据修复,恢复删除文件等等....它能够将一个file解析成 hex形式,这样你就可以对hex进行修改,然后你就可以看到修复后的结果,为什么要在sqlserver系列中说这个呢???很简单呀,sqlserver的DB本 质上也是一个mdf文件,对吧,既然是文件,我就可以利用winhex对它进行随意的修改,然后你也知道sqlserver的数据都是以数据页的形式封装的, 那我就可以修改它的数据页,对不对,这样我就可以随便改变

SQL Server 2014,表变量上的非聚集索引

从Paul White的推特上看到,在SQL Server 2014里,对于表变量(Table Variables),它是支持非唯一聚集索引(Non-Unique Clustered Indexes)和非聚集索引(Non-Clustered Indexes)的.看到这个,我决定在自己的虚拟机里尝试下,因为这将是个卓越的功能.表变量很棒,因为用它可以避免过多的重编译(excessive recompilations).当你创建它们时,它们是没有统计信息,你不会改变数据库架构.它们只是变量,但在Te