新年新技術:最佳化擴充套件分散式資料庫的隔離級別
導讀 | 本文將解釋分散式資料庫的隔離級別,並概述它們之間的權衡。我們還建議選擇最適合您需求的隔離級別。 |
隔離定義為在資料庫併發執行多個事務時,不會影響到其他事務的執行。本文將解釋這些隔離級別,並概述它們之間的權衡。我們還建議選擇最適合您需求的隔離級別。
讓我們從有效使用隔離級別所需的最低知識開始,研究表示大多數應用程式的兩個用例及其對不同隔離級別的影響。
客戶從銀行賬戶取錢:
開始交易;
讀取使用者餘額;
在活動表中建立一行(我們避免將其稱為事務,以避免與資料庫事務混淆);
從讀取的金額中減去提款金額後,更新使用者的餘額;
提交。
在交易完成之前,我們不希望使用者的餘額發生變化。
國際客戶從零售店購買物品時使用的貨幣與標價不同:
開始交易;
讀取exchange_rate表,獲取最新的兌換率;
在訂單表中建立一行;
提交。
假設有一個單獨的過程正在不斷更新匯率,但我們不關心匯率在讀取之後是否會發生變化,即使當前交易還沒有完成。
Serializable隔離級別是唯一滿足ACID屬性理論定義的級別。它從本質上說,兩個併發事務不允許相互干擾對方的更改,如果一個接一個地執行,則必須產生相同的結果。
不幸的是,Serializable通常被認為是不切實際的,即使對於非分散式資料庫。所有現有的流行資料庫(如Postgres和MySQL)都不推薦它,這並不是巧合。
為什麼這個設定如此不切實際?讓我們來看看兩個用例:
在銀行用例中,Serializable是完美的。在讀取使用者餘額後,資料庫保證使用者餘額不會改變。因此,應用業務邏輯是安全的,例如確保使用者有足夠的餘額,並根據讀取的值寫入新的餘額。在銀行用例中,Serializable是完美的。
在零售用例中,Serializable也可以正常工作。在建立訂單的事務成功之前,不允許更新匯率的流程執行其操作。
由於事件的精確順序,這聽起來像是一個很棒的功能。但是,如果建立訂單的交易緩慢又複雜怎麼辦?也許它需要去倉庫檢查庫存。也許它必須對下訂單的使用者進行信用檢查。它將持有該行上的鎖,防止匯率程式更新。這種意想不到的依賴關係可能會阻止系統擴充套件。
Serializable設定也會經常出現死鎖。例如,如果兩個事務讀取一個使用者的餘額,它們將在該行上放置一個共享讀取鎖。如果事務稍後修改該行,它們將嘗試將讀鎖升級為寫鎖。這將導致死鎖,因為每個事務都將被另一個事務持有的讀鎖阻塞。正如我們將在下面看到的,不同的隔離級別可以很容易地避免這個問題。
換句話說,有爭議的工作負載將無法使用Serializable設定進行擴充套件。如果工作負載沒有爭議,我們就不需要這個隔離級別。較低的隔離可能同樣有效。
為了解決這種不必要且昂貴的安全問題,必須重構應用程式。例如,獲取匯率的程式碼在事務開始之前呼叫,或者使用單獨的連線來完成讀取程式。
雖然理論上沒有那麼純粹,但其他隔離級別允許您在個案的基礎上執行序列化讀取。這使得它們在編寫可伸縮系統時更加靈活和實用。
有一些方法可以在不鎖定資料的情況下提供可序列化的一致性。然而,這類系統也會遇到上述相同的問題,即衝突交易的失敗方式不同。問題的根本原因在於隔離級別本身,任何實現都無法讓您擺脫這些約束。
RepeatableRead是一個模糊的設定。因為它區分了點選擇和搜尋,併為每個點定義了不同的行為。這不是非黑即白的,並導致了許多其他實現。這裡就不詳細討論這個隔離級別。然而,就我們的用例而言,RepeatableRead提供了與Serializable相同的保證,因此繼承了相同的問題。
SnapshotRead隔離級別雖然不是ANSI標準,但已經越來越流行了。也被稱為MVCC。這種隔離級別的優點是無爭用:它在事務開始時建立一個快照。所有讀取都傳送到該快照,而不獲取任何鎖。但寫操作遵循嚴格的可序列化規則。
SnapshotRead事務對於只讀工作負載最有價值,因為您可以看到一致的資料庫快照。這避免了在載入事務上相互依賴的不同資料片段時出現意外。還可以使用快照功能在特定時間讀取多個表,然後觀察自該快照以來發生的更改。對於希望將更改流式傳輸到分析資料庫的更改資料捕獲工具,這個功能非常方便。
對於執行寫入的事務,快照特性不是很有用。您主要想控制是否允許在上次讀取後更改值。如果您想允許該值更改,它將在您閱讀後立即失效,因為其他人可以稍後對其進行更新。因此,無論您是從快照讀取還是獲取最新值,這都沒有關係。如果不希望更改,則需要最新的值,並且必須鎖定行以防止更改。
換句話說,SnapshotRead對於只讀工作負載很有用,但對於寫工作負載來說,它並不比ReadCommitted好,我們將在下面介紹。
在此隔離級別中重新應用Retail用例可以很自然地工作,不會產生爭用:從匯率中讀取的值產生了建立事務時快照的值。在進行此交易時,允許單獨的交易來更新匯率。
銀行用例如何?資料庫允許您對資料進行鎖定。例如,MySQL能夠“在共享模式下選擇…鎖定”(讀鎖)。此模式將讀取升級為可序列化事務的讀取。當然,還繼承了此隔離級別的死鎖風險。
較低的隔離級別可以兩全其美。您可以發出一個“select…for update”(寫鎖)。此鎖阻止另一個事務獲取此行上的任何型別的鎖。這種悲觀鎖定方法一開始聽起來很糟糕,但它允許兩個競爭事務成功完成,而不會遇到死鎖。第二個事務將等待第一個事務完成,此時它將讀取並鎖定新值所在的行。
MySQL預設支援SnapshotRead隔離級別,但會將其稱為REPEATABLE_READ。
雖然單個資料庫有多種有效實現可重複讀取的方法,但在分散式資料庫中,問題變得更加複雜。這是因為事務可以跨越多個碎片。如果是這樣,系統必須提供嚴格的訂購保證。這種排序要求系統使用集中的併發控制機制或全域性一致的時鐘。這兩種方法本質上都試圖將原本可以彼此獨立執行的事件緊密耦合起來。
因此,在希望分散式資料庫支援分散式快照讀取之前,必須瞭解並願意接受這些權衡。
ReadCommitted隔離比SnapshotRead更明確,因為它不斷返回資料庫的最新檢視。這也是隔離級別中爭議最小的。在這個級別上,每次讀取一行時可能會得到不同的值。
ReadCommitted設定還允許您透過發出讀或寫鎖定來升級讀取,從而有效地允許您按需執行可序列化讀取。正如前面所說的,對於打算修改資料的應用程式事務,這種方法提供了兩全其美的解決方案。
Postgres支援的預設隔離級別是ReadCommitted。
這種隔離級別通常被認為是不安全的,不建議用於分散式或非分散式設定。這是因為您可能會讀取稍後可能回滾的資料(或者從一開始就不存在的資料)。
這個主題與隔離級別是正交的,但這裡必須涵蓋這一點,因為它在保持事物的鬆散耦合方面具有重要意義。
在分散式系統中,如果兩行位於不同的碎片或資料庫中,並且您希望在單個事務中原子化地修改它們,則會產生兩階段提交(2PC)的開銷。
這需要更多的工作:
- 建立關於分散式事務的後設資料並儲存到持久儲存中。
- 對所有單個交易釋出準備。
- 提交的決策儲存到後設資料中。
- 向準備好的事務發出提交。
prepare要求您儲存後設資料,以便在提交(或回滾)前,如果節點發生崩潰,可以在新的leader中恢復事務。
分散式事務還與隔離級別互動。例如,假設只有2PC事務的第一次提交成功,第二次提交被延遲。如果應用程式已經讀取了第一次提交的效果,那麼資料庫必須阻止應用程式讀取第二次提交的行,直到完成。反過來說,如果應用程式在第二次提交之前讀取了一行,那麼它肯定看不到第一次提交的效果。
資料庫必須做額外的工作來支援分散式事務的隔離保證。如果應用程式可以容忍這些部分提交呢?然後,我們就做了應用程式不關心的不必要的工作。可能值得引入一個新的隔離級別,如ReadPartialCommits。請注意,這不同於ReadUncommitted,使用者讀取的資料最終可能被回滾。
最後,過度使用2PC會降低系統的整體可用性和延遲。這是因為效能最差的碎片將決定您的有效可用性。
為了具有可伸縮性,應用程式應該避免依賴資料庫的任何高階隔離功能。相反,它應該儘可能少地使用擔保。如果可以編寫一個應用程式來使用ReadCommitted隔離級別,那麼不建議遷移到SnapshotRead。Serializable或RepeatableRead。
最好避免多語句事務,但隨著應用程式的發展,這可能會不可避免。此時,嘗試主要依賴事務的原子保證,並保持資料庫系統支援的最低隔離級別。
如果使用分片資料庫,請完全避免分散式事務。這可以透過將相關行保留在同一個碎片中來實現。必須從一開始就這樣做,因為很難將非併發程式重構為併發程式。
原文來自:
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/69955379/viewspace-2933656/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- 資料庫隔離級別資料庫
- Mysql資料庫的隔離級別MySql資料庫
- 資料庫的四種隔離級別資料庫
- 聊聊資料庫的事務隔離級別資料庫
- 資料庫事務與隔離級別資料庫
- MySQL資料庫中的四種隔離級別MySql資料庫
- [資料庫]事務的4種隔離級別資料庫
- 分散式 SQL 資料庫與表格最佳化技術分散式SQL資料庫
- 讀構建可擴充套件分散式系統:方法與實踐09可擴充套件資料庫基礎套件分散式資料庫
- 資料庫系列:事務的4種隔離級別資料庫
- [轉帖]資料庫的快照隔離級別(Snapshot Isolation)資料庫
- 資料庫事務與事務的隔離級別資料庫
- golang saas框架,資料庫級別隔離、讀寫分離Golang框架資料庫
- 論 MySQL 之事務隔離級別 | 資料庫篇MySql資料庫
- MySQL資料庫引擎、事務隔離級別、鎖MySql資料庫
- java資料型別擴充套件Java資料型別套件
- 「分散式技術專題」事務型、分析型資料資源隔離機制分散式
- 聊聊Oracle的分散式資料庫技術Oracle分散式資料庫
- 微服務架構中資料庫擴充套件和最佳化微服務架構資料庫套件
- KES資料庫實踐指南:探索KES資料庫的事務隔離級別資料庫
- SQL Server 2017 AlwaysOn輔助副本資料庫的隔離級別SQLServer資料庫
- 資料庫事務的隔離級別及四大特性資料庫
- 資料庫事務的四大特性和隔離級別資料庫
- Java中JDBC進階教程之資料庫的隔離級別!JavaJDBC資料庫
- 分散式資料庫技術論壇分散式資料庫
- 如何理解資料安全隔離技術
- 資料庫之事務、隔離級別和併發問題資料庫
- 【進階之路】詳解資料庫事物與隔離級別資料庫
- kotlin 擴充套件(擴充套件函式和擴充套件屬性)Kotlin套件函式
- 資料庫隔離資料庫
- 帶你真正理解MySQL資料庫的四種隔離級別!MySql資料庫
- 資料庫學習筆記:事務的特性和隔離級別資料庫筆記
- PHP的SPL擴充套件庫(四)函式PHP套件函式
- MySQL的隔離級別MySql
- 資源隔離技術之記憶體隔離記憶體
- ES6各大資料型別的擴充套件大資料資料型別套件
- 為資料賦能:騰訊TDSQL分散式金融級資料庫前沿技術SQL分散式資料庫
- PHP的SPL擴充套件庫(一)資料結構PHP套件資料結構