SQL Server里的闩锁介绍

摘要:
闩锁是SQLServer存储引擎使用轻量级同步对象,用来保护多线程访问内存内结构。闩锁首次在SQLServer7.0里引入,同时微软首次引入了行级别锁。在SQLServer里没有闩锁提示,也没有可用闩锁隔离级别。SQLServer还是可以访问没被锁管理器保护的共享数据结构,例如页头。还有SQLServer基于闩锁基础的其他组件也是,有单线程代码路径。好了,我们继续讲解SQLServer里的各种闩锁类型,还有如何对它们进行故障排除。对于这些非缓存闩锁,SQLServer在统计信息里以LATCH_为前缀出现。

在今天的文章里我想谈下SQL Server使用的更高级的,轻量级的同步对象:闩锁(Latch)。闩锁是SQL Server存储引擎使用轻量级同步对象,用来保护多线程访问内存内结构。文章的第1部分我会介绍SQL Server里为什么需要闩锁,在第2部分我会给你介绍各个闩锁类型,还有你如何能对它们进行故障排除。

为什么我们需要闩锁?

闩锁首次在SQL Server 7.0里引入,同时微软首次引入了行级别锁(row-level locking)。对于行级别锁引入闩锁的概念是非常重要的,不然的话在内存中会出现丢失更新(Lost Updates)的现象。如我所说的,闩锁是存储引擎使用的轻量级同步对象,是SQL Server用来保护内存结构的。闩锁只不过是类似于多线程编程里的所谓的临界区(Critcal Section)概念。

在传统并发编程里,临界区是同时只能一个线程运行的代码。闩锁本身是个临界区的特殊版本,因为它允许多个并发读操作。在SQL Server的上下文里这意味着多个线程可以并发读取一个共享数据结构,例如内存中的页,但是写入共享数据结构必须是单个线程进行。

闩锁是用来协调数据库里多个线程物理执行,然而锁是基于选择的事务隔离级别,用来逻辑获得需要的隔离级别。作为开发者或DBA的你,你可以用不同方式影响锁——例如通过SQL Server里的隔离级别,或者通过各种可用锁提示。另一方面闩锁是不能以直接方式控制的。在SQL Server里没有闩锁提示,也没有可用闩锁隔离级别。下表是锁和闩锁之间的比较:

         锁(Locks)         闩锁(Latches)

  • 控制……      事务              线程
  • 保护……    数据库内容          内存中数据结构
  • 模式……     共享的(Shared),      保持(Keep),

         更新(Update),       共享的(Shared),

         排它的(Exclusive),     更新(Update),排它的(Exclusive),

         意向的(Intension)      销毁(Destroy)

  • 死锁…… 检测并解决(detection&resolution)  通过严谨代码来避免
  • 保持在……  锁管理器的哈希表(Hashtable)  保护的数据结构(Protected Data Structure)

从表里可以看到,闩锁支持更细粒度保持(Keep)和销毁(Destroy)模式。保持闩锁主要用来引用计数,例如当你想知道在指定闩锁上有多少其它闩锁在等待。销毁闩锁是最有限制的一个(它甚至会阻塞保持闩锁),当闩锁被销毁时会用到,例如当惰性写入器(Lazy Writer)想要释放内存中的页时。我们先介绍下各种闩锁模式,然后说下各个闩锁模式的兼容性。

NL(空闩锁):

  • 内部
  • 未使用

KP(保持闩锁):

  • 可以由多个任务同时持有
  • 只被一个DT模式的闩锁阻塞

SH(共享闩锁):

  • 读取数据页的时候使用
  • 可以由多个任务同事持有
  • 阻塞EX模式和DT模式的闩锁

UP(更新闩锁):

  • 写入系统分配页面和tempdb的行版本化页面时使用
  • 一个这种模式的闩锁只能被一个单独的任务持有

EX(排它闩锁):

  • 写入数据页的时候使用
  • 一个这种模式的闩锁只能被一个单独的任务持有

DT(销毁闩锁):

  • 很少使用
  • 一个这种模式的闩锁只能被一个单独的任务持有

SQL Server里的闩锁介绍第1张

在SQL Server里,一致性不能只用锁来获得。SQL Server还是可以访问没被锁管理器保护的共享数据结构,例如页头。还有SQL Server基于闩锁基础的其他组件也是,有单线程代码路径。好了,我们继续讲解SQL Server里的各种闩锁类型,还有如何对它们进行故障排除。

闩锁类型与故障排除

SQL Server区分3个不同闩锁类别

  • IO闩锁
  • 缓冲区闩锁(BUF)
  • 非缓冲区闩锁(Non-BUF)

我们来详细看下这3个不同类别。当在缓冲池的页读写操作未完成——即当你读自/写入你的存储子系统时(2者未同步),SQL Server会使用IO闩锁(I/O Latches)。对于这些I/O闩锁,SQL Server在统计信息里以PAGEIOLATCH_为前缀出现。你可以在DMVsys.dm_os_wait_stats查看下这些闩锁类型的等待。

1 SELECT * FROM sys.dm_os_wait_stats WHERE wait_type LIKE 'PAGEIOLATCH_%'

SQL Server里的闩锁介绍第2张

使用这些闩锁,SQL Server保证那些页不会并发多次读入缓存池,那些页也不会从缓存池忽略,在那些页需要被查询访问的时候。

除这些I/O闩锁外,SQL Server也支持所谓的缓存区闩锁(Buffer Latches),它用来保护缓冲池里页不会被并发运行的线程影响。这些闩锁,SQL Server使用它们来阻止内存中的丢失更新(Lost Updates)。没有这类闩锁,在缓存池里会有并发的读写页,它们会引发主内存里页的损坏。对于这些缓存闩锁,SQL Server在统计信息里以PAGELATCH_为前缀出现。你可以在DMVsys.dm_os_wait_stats查看下这些闩锁类型的等待。这里最重要的是你涉及了主内存的竞争,因为他们的等待类型名称里不包含IO字样。

1 SELECT * FROM sys.dm_os_wait_stats WHERE wait_type LIKE 'PAGELATCH_%'

SQL Server里的闩锁介绍第3张

最后SQL Server内部使用所谓的非缓存区闩锁(Non-Buffer Latches)来保护除缓冲池外的共享数据结构。对于这些非缓存闩锁,SQL Server在统计信息里以LATCH_为前缀出现。你可以在DMVsys.dm_os_wait_stats查看下这些闩锁类型的等待。

1 SELECT * FROM sys.dm_os_wait_stats WHERE wait_type LIKE 'LATCH_%'

SQL Server里的闩锁介绍第4张

但在这个DMV里这些对于非缓存区闩锁的等待只是SQL Server内部使用的各个闩锁的概况信息,你可以在单独的DMV sys.dm_os_latch_stats找到更详细的信息。

1 SELECT * FROM sys.dm_os_latch_stats

SQL Server里的闩锁介绍第5张

SQL Server 2014内部使用163个闩锁来同步共享数据结构的访问。其中一个著名的闩锁是FGCB_ADD_REMOVE,它用来保护文件组的文件组控制阻塞(File Group Control Block (FGCB)),在以下特定操作期间:

  • 文件增长(手动或自动)
  • 增加/删除文件组文件
  • 重新计算填充比重(Recalculating proportional fill weightings
  • 在循环分配期间,通过文件组的文件回收。

当你看到这个闩锁排在前列是,你肯定有太多自动增长操作的问题,原因是你数据库糟糕的默认配置。当查询尝试读/写保护的数据结构且需要等待一个闩锁时,查询就会进入挂起状态,直到闩锁可以成功获取。因此查询经过的整个查询生命周期包括运行(RUNNING)挂起(SUSPENDED)可运行(RUNNABLE),最后再次运行(RUNNING)。因此,当查询长时间把持闩锁时,强制共享数据结构保护才有意义。那是因为改变查询状态也意味着进行Windows系统里的上下文切换,依据引入的CPU周期是个很昂贵的操作。

因此对于读写频繁或极短时间内的共享数据结构上放上闩锁没有意义。在这个情况下,需要的上下文切换会杀死SQL Server的整体性能,它需要花费太多的时间来完成整个查询生命周期(运行(RUNNING)挂起(SUSPENDED)可运行(RUNNABLE))。那就是是SQL Server引入的所谓自旋锁(Spinlocks)。锁管理器就是这样数据结构的好例子:当锁定或解锁数据对象(例如记录,页等)时只需要单个线程访问。但当你查看sys.dm_os_latch_stats时,你会发现没有闩锁保护锁管理器本身。锁管理器使用的哈希表里对应的哈希桶使用自旋锁来保护——LOCK_HASH自旋锁通过锁管理器执行锁定和解锁操作前,必须获得自旋锁。但今天我不想再讲解自旋锁了,因为我会在专门的文章里详细介绍——耐心期待下吧:)

小结

在这个文章里,我们探讨了SQL Server里的闩锁。如你所见,闩锁是SQL Server使用的轻量级同步对象,用来保存内存里的共享数据结构。SQL Server区分3个不同闩锁类型——IO闩锁,缓存区闩锁和非缓存区闩锁。你也看到了如何使用DMVsys.dm_os_wait_stats sys.dm_os_latch_stats进行闩锁等待的故障排除

感谢关注!

参考文章:

https://www.sqlpassion.at/archive/2014/06/23/introduction-to-latches-in-sql-server/

免责声明:文章转载自《SQL Server里的闩锁介绍》仅用于学习参考。如对内容有疑问,请及时联系本站处理。

上篇IIS日志-网站运维的好帮手Mysql 8.0+ windows 安装教程下篇

宿迁高防,2C2G15M,22元/月;香港BGP,2C5G5M,25元/月 雨云优惠码:MjYwNzM=

相关文章

ehcache 缓存

、通过使用API来动态的添加缓存(将缓存的配置信息通过java代码来实现而非写在配置文件) 2、通过配置文件ehcache.xml创建缓存实例 packageorg.jeecgframework.cache; importorg.jeecgframework.core.util.StringExt; public classCacheInstanc...

本地缓存解决方案-Caffeine Cache

1.1 关于Caffeine Cache ​ Google Guava Cache是一种非常优秀本地缓存解决方案,提供了基于容量,时间和引用的缓存回收方式。基于容量的方式内部实现采用LRU算法,基于引用回收很好的利用了Java虚拟机的垃圾回收机制。其中的缓存构造器CacheBuilder采用构建者模式提供了设置好各种参数的缓存对象,缓存核心类LocalCa...

浅谈http中的Cache-Control,cdn缓存加速失败的原因

原文: https://blog.csdn.net/u012375924/article/details/82806617 前言我们用http访问时,会先发送一个请求,之后服务器返回一个应答,在Chrome的开发者工具(按F12或右击选择检查)中展现了整个过程: 第一部分General是概要,包含请求地址,请求方式,状态码,服务器地址以及Referrer...

Oracle11g温习-第十二章:tables

2013年4月27日 星期六 10:44 1、表的功能 存储、管理数据的基本单元(二维表:由行和列组成) 2、表的类型 1)普通表:【heap table(堆表) :数据存储时,无序的,对它的访问采用全表扫描】。 2)分区表:【(>2G) 对大表进行优化(Range Partitioning,List PartitioningHash P...

Spring系列缓存注解@Cacheable @CacheEvit @CachePut 使用姿势介绍

SpringBoot系列缓存注解@Cacheable @CacheEvit @CachePut使用姿势介绍 Spring在3.1版本,就提供了一条基于注解的缓存策略,实际使用起来还是很丝滑的,本文将针对几个常用的注解进行简单的介绍说明,有需要的小伙伴可以尝试一下 本文主要知识点: @Cacheable: 缓存存在,则使用缓存;不存在,则执行方法,并将结...

DB2数据库中SQL语句中使用or和and的关键字的时候注意事项

--正确的SQL语句,查询结果:746 SELECT COUNT(1) FROM EHR_BASE EB, EHR_HF_INDICATOR EHI WHERE EB.EHR_ID=EHI.EHR_ID AND EB.CANCELLED = '1' AND EB.DEATH = '1' AND EB.MOVE...