淺談高效能資料庫叢集——讀寫分離

貝聊科技發表於2018-06-30
作者 陳彩華 貝聊Java後端工程師
文章轉載交流請聯絡 caison@aliyun.com
複製程式碼

最近學習了阿里資深技術專家李運華的架構設計關於讀寫分離的教程,頗有收穫,總結一下。

本文主要介紹高效能資料庫叢集讀寫分離相關理論,基本架構,涉及的複雜度問題以及常見解決方案。

1 讀寫分離概述

讀寫分離概述

基本架構圖:

基本架構圖.jpg

2 適用場景

適用場景.png

讀寫分離不是銀彈,並不是一有效能問題就上讀寫分離,而是應該先優化,例如優化慢查詢,調整不合理的業務邏輯,引入快取查詢等只有確定系統沒有優化空間後才考慮讀寫分離叢集

3 引入的系統複雜度問題

問題一 主從複製延遲

主從複製延遲.png

問題二 分配機制

如何將讀寫操作區分開來,然後訪問不同的資料庫伺服器?

解決方案1 客戶端程式程式碼封裝實現

基本架構圖

程式程式碼封裝實現分配基本架構圖

程式程式碼封裝

業界開源實現

  • Sharding-JDBC 定位為輕量級Java框架,在Java的JDBC層提供的額外服務。 它使用客戶端直連資料庫,以jar包形式提供服務,無需額外部署和依賴,可理解為增強版的JDBC驅動,完全相容JDBC和各種ORM框架。

Sharding-JDBC基本架構圖

  • 淘寶TDDL 淘寶根據自身業務需求研發了 TDDL ( Taobao Distributed Data Layer )框架,主要用於解決 分庫分表場景下的訪問路由(持久層與資料訪問層的配合)以及異構資料庫之間的資料同步 ,它是一個基於集中式配置的 JDBC DataSource 實現,具有分庫分表、 Master/Salve 、動態資料來源配置等功能。

淘寶TDDL基本架構圖

解決方案2 服務端中介軟體封裝

基本架構圖

服務端中介軟體封裝實現分配基本架構圖

服務端中介軟體封裝

業界開源實現

  • MySQL官方推薦的MySQL Router

MySQL Router架構圖

MySQL Router是輕量級的中介軟體,可在應用程式和任何後端MySQL伺服器之間提供透明路由。它可以用於各種各樣的用例,例如通過有效地將資料庫流量路由到適當的後端MySQL伺服器來提供高可用性和可伸縮性。可插拔架構還使開發人員能夠擴充套件MySQL Router以用於自定義用例。

基於MySQL Router可以實現讀寫分離,故障自動切換,負載均衡,連線池等功能。

  • MySQL官方提供的MySQL Proxy

    MySQL Proxy

  • 360開源的Atlas

Atlas架構圖形象表示

Atlas總體架構

Atlas是由平臺部基礎架構團隊開發維護的一個基於MySQL協議的資料中間層專案。它是在mysql-proxy的基礎上,對其進行了優化,增加了一些新的功能特性。

常見的開源資料庫中介軟體對比

功能 Sharding-JDBC TDDL Amoeba Cobar MyCat
基於客戶端還是服務端 客戶端 客戶端 服務端 服務端 服務端
分庫分表
MySQL互動協議 JDBC Driver JDBC Driver 前端用NIO,後端用JDBC Driver 前端用NIO,後端用BIO 前後端均用NIO
支援的資料庫 任意 任意 任意 MySQL 任意

(本文同時發表於作者個人部落格 www.jianshu.com/u/ced6b70c7…)

參考

從0開始學架構——李運華

Mycat原理解析-Mycat架構分析

相關文章