記一次公司倉庫資料庫伺服器死鎖過程
倉庫揀貨卡死,排查了資料庫的很多地方,都沒有頭緒,最後到SQL Server 錯誤日誌裡檢視,終於發現了蛛絲馬跡
EXEC xp_readerrorlog 0,1,NULL,NULL,'2015-09-21','2015-10-10','DESC'
waiter id=process5c30e08 mode=U requestType=wait waiter-list owner id=process5c26988 mode=X owner-list keylock hobtid=72057597785604096 dbid=33 objectname=stoxxx.dbo.Orderxxx indexname=IX_PricingExpressProductCode_State id=lock17fa96980 mode=X associatedObjectId=72057597785604096 waiter id=process5c26988 mode=U requestType=wait waiter-list owner id=process5c30e08 mode=X owner-list keylock hobtid=72057597785604096 dbid=33 objectname=stoxxx.dbo.Orderxxx indexname=IX_PricingExpressProductCode_State id=lock87d69e780 mode=X associatedObjectId=72057597785604096 resource-list(@OperateState money,@HandledByNewWms bit,@State int,@OrderOut int)UPDATE [Orderxx] SET [OperateState] = @OperateState,[HandledByNewWms] = @HandledByNewWms WHERE (([Orderxxx].[State] = @State) And ([Orderxxx].[OrderOut] = @OrderOut) And ([Orderxxx].[PricingExpressProductCode] IN ('UKNIR'))) inputbufunknown frame procname=unknown line=1 sqlhandle=0x000000000000000000000000000000000000000000000000UPDATE [Orderxxx] SET [OperateState] = @OperateState,[HandledByNewWms] = @HandledByNewWms WHERE (([Orderxxx].[State] = @State) And ([Orderxxx].[OrderOut] = @OrderOut) And ([Orderxxx].[PricingExpressProductCode] IN ('UKNIR'))) frame procname=adhoc line=1 stmtstart=134 sqlhandle=0x020000009d376d18a17e7ea51289d8caa2fb4de65c976389 executionStack process id=process5c30e08 taskpriority=0 logused=10320 waitresource=KEY: 33:72057597785604096 (112399c2054a) waittime=4813 ownerId=31578743038 transactionname=user_transaction lasttranstarted=2015-09-24T10:22:58.410 XDES=0x372e95950 lockMode=U schedulerid=17 kpid=8496 status=suspended spid=153 sbid=0 ecid=0 priority=0 trancount=2 lastbatchstarted=2015-09-24T10:22:58.540 lastbatchcompleted=2015-09-24T10:22:58.540 clientapp=.Net SqlClient Data Provider hostname=CK1-WIN-WEB02 hostpid=37992 loginname=ck1.biz isolationlevel=read committed (2) xactid=31578743038 currentdb=33 lockTimeout=4294967295 clientoption1=671088672 clientoption2=128056(@OperateState money,@HandledByNewWms bit,@State int,@OrderOut int)UPDATE [Orderxxx] SET [OperateState] = @OperateState,[HandledByNewWms] = @HandledByNewWms WHERE (([Orderxxx].[State] = @State) And ([Orderxxx].[OrderOut] = @OrderOut) And ([Orderxxx].[PricingExpressProductCode] IN ('UKNIR'))) inputbufunknown frame procname=unknown line=1 sqlhandle=0x000000000000000000000000000000000000000000000000UPDATE [Orderxxx] SET [OperateState] = @OperateState,[HandledByNewWms] = @HandledByNewWms WHERE (([Orderxxx].[State] = @State) And ([Orderxxx].[OrderOut] = @OrderOut) And ([Orderxxx].[PricingExpressProductCode] IN ('UKNIR'))) frame procname=adhoc line=1 stmtstart=134 sqlhandle=0x020000009d376d18a17e7ea51289d8caa2fb4de65c976389 executionStack process id=process5c26988 taskpriority=0 logused=9892 waitresource=KEY: 33:72057597785604096 (70f5b089bb2b) waittime=4813 ownerId=31579268946 transactionname=user_transaction lasttranstarted=2015-09-24T10:27:01.357 XDES=0x98312f950 lockMode=U schedulerid=16 kpid=9184 status=suspended spid=454 sbid=0 ecid=0 priority=0 trancount=2 lastbatchstarted=2015-09-24T10:27:01.490 lastbatchcompleted=2015-09-24T10:27:01.487 clientapp=.Net SqlClient Data Provider hostname=CK1-WIN-WEB02 hostpid=37992 loginname=ck1.biz isolationlevel=read committed (2) xactid=31579268946 currentdb=33 lockTimeout=4294967295 clientoption1=671088672 clientoption2=128056 process-list deadlock victim=process5c26988deadlock-list
咋一看上面的錯誤資訊,可以發現兩條相同的語句造成的死鎖,但是這麼短的語句不可能持有排他鎖太久
再仔細分析一下錯誤日誌,發現都死鎖在同一個非聚集索引上,再問了一下開發,開發那邊說,這條語句是在一個大事務裡面,這個事務會做7、8件事
索引屬性
還有索引裡面的資料,發現很多重複值
SQL語句是這樣的
(@OperateState money,@HandledByNewWms bit,@State int,@OrderOut int)@HandledByNewWms=(1) @OperateState=($1.0000) @OrderOut=(4055484) @State=(3) UPDATE [Orderxxx] SET [OperateState] = $1.0000,[HandledByNewWms] = 1WHERE (([Orderxxx].[State] = 3) And ([Orderxxx].[OrderOut] = 4055484) And ([Orderxxx].[PricingExpressProductCode] IN ('UKRRM','UKRLE')))
下圖為語句生成的執行計劃
當時的情況是大量SQL語句被阻塞,而阻塞的語句正是下面這條語句
UPDATE [Orderxxx] SET [OperateState] = $1.0000,[HandledByNewWms] = 1WHERE (([Orderxxx].[State] = 3) And ([Orderxxx].[OrderOut] = 4055484) And ([Orderxxx].[PricingExpressProductCode] IN ('UKRRM','UKRLE')))
解決方法
上面得出幾個症狀
1、update語句是在一個大事務裡面,事務太大導致其他session等待排他鎖的時間變長
2、大家都在使用同一個非聚集索引,並掃描PricingExpressProductCode欄位
3、索引裡的重複值很多
從上面的症狀基本可以判斷,這個非聚集索引無啥用,可以禁用之
ALTER INDEX [IX_PricingExpressProductCode_State] ON [dbo].[Orderxxx] DISABLE
禁用之後,死鎖消失,問題解決,倉庫的怨氣也隨之消失
這一次排查過程時間有點長,但是很好定位,SQL Server錯誤日誌給出了足夠的資訊定位死鎖問題,所以遇到問題的時候一定要分析清楚日誌
如有不對的地方,歡迎大家拍磚o(∩_∩)o
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/1817/viewspace-2812958/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- 一次詭異的線上資料庫的死鎖問題排查過程資料庫
- 記一次開啟資料庫慢原因分析過程資料庫
- 記錄一次資料庫CPU被打滿的排查過程資料庫
- 金倉資料庫KingbaseES儲存過程 RETURN語句資料庫儲存過程
- 【資料庫】資料庫儲存過程(一)資料庫儲存過程
- 資料庫死鎖排查思路分享(糾正篇)資料庫
- 伺服器斷電Oracle資料庫修復資料過程伺服器Oracle資料庫
- 資料庫恢復過程資料庫
- 資料庫儲存過程資料庫儲存過程
- 記一次排查線上MySQL死鎖過程,不能只會curd,還要知道加鎖原理MySql
- 資料湖 vs 倉庫 vs 資料庫資料庫
- 資料庫的連線過程資料庫
- MySql資料庫——儲存過程MySql資料庫儲存過程
- (資料庫十)資料庫中的鎖機制以及死鎖產生的原因及解決辦法資料庫
- 關於 SAP HANA 資料庫的死鎖問題(deadlock)資料庫
- 資料庫擴充套件表設計過程記錄資料庫套件
- 【資料庫資料恢復】透過資料頁恢復Sql Server資料庫資料的過程資料庫資料恢復SQLServer
- SQL Server 資料庫查詢死鎖的處理步驟SQLServer資料庫
- 資料庫倉庫系列:(一)什麼是資料倉儲,為什麼要資料倉儲資料庫
- 記一次Oracle死鎖/阻塞排查Oracle
- 記一次線上mysql死鎖MySql
- 豈止刪庫,程式設計師鎖死伺服器,遊戲公司解散虧 600 萬程式設計師伺服器遊戲
- 記一次資料庫刪表事件資料庫事件
- 資料庫課程作業筆記資料庫筆記
- 【資料庫】使用DBever連線人大金倉資料庫資料庫
- 庫存系統:倉庫層、排程層、銷售層的庫存資料模型設計模型
- 達夢資料庫資料檔案遷移過程資料庫
- 記一次神奇的Mysql死鎖排查MySql
- 【資料庫資料恢復】透過恢復NDF檔案修復資料庫的資料恢復過程資料庫資料恢復
- 記一次刪庫到資料恢復資料恢復
- 記一次mysql資料庫被勒索(下)MySql資料庫
- 記一次mysql資料庫被勒索(中)MySql資料庫
- 記一次資料庫事故-ORA-15038資料庫
- 資料庫鎖機制資料庫
- 《資料庫系統原理》課程筆記資料庫筆記
- 資料恢復記錄:硬碟分割槽損壞修復SqlServer資料庫過程資料恢復硬碟SQLServer資料庫
- 【資料庫資料恢復】Sql Server資料庫檔案丟失的資料恢復過程資料庫資料恢復SQLServer
- 記一次MySQL資料遷移到SQLServer全過程MySqlServer