PingCAP馬曉宇:TiDB的HTAP之路
HTAP是目前資料庫領域比較熱門的一個概念,它既能支援OLTP(線上事務處理),又能支援OLAP(線上分析處理),可以涵蓋大部分企業級應用的需求,一站式解決他們的問題。本次,小編有幸採訪到PingCAP分析型產品負責人馬曉宇先生,就TiDB的HTAP之路作出分享。
▲PingCAP分析型產品負責人馬曉宇
TiDB= X% TP+Y% AP =HTAP
TiDB是一個分散式NewSQL資料庫,它支援水平彈性擴充套件、ACID事務、標準SQL、MySQL語法和MySQL協議,具有資料強一致的高可用特性,是一個不僅適合OLTP場景,還適合OLAP場景的混合資料庫。
追溯TiDB的發展史,要從其“上古時代”說起。馬曉宇表示,“起初,由於受到Google Spanner/F1的啟發,PingCAP開始著手研發TiDB。”彼時國外已經出現了 CockroachDB(蟑螂資料庫)等一系列解決TP問題的新興資料庫廠商,但國內研發這類資料庫的公司寥寥無幾,TiDB的出現填補了這塊市場空白。
最開始,TiDB只是解決TP問題,但在實際應用過程中,使用者對TiDB資料庫的查詢功能提出了更高的要求。為此,TiDB調整了自己的資料庫執行器,增加了AP的功能擴充。如此以來,TiDB就同時具備TP和AP的功能。
馬曉宇透露,“客戶一直對‘TiDB適用於100%TP和80%AP場景’中的80%抱有懷疑態度,為什麼是80%,不是75%,也不是85%?所以,後來我們就改用了一個比較精確(時髦)的說法:TiDB是一款HTAP資料庫。”
TiDB資料庫的架構優勢
TiDB的整體架構分為TiDB和TiKV兩層。TiDB是一層無狀態的SQL Layer,對外暴露MySQL網路協議,負責解析使用者的SQL語句,生成分散式的Query Plan,翻譯成底層Key Value操作傳送給TiKV。“通俗的講,TiDB是XXXXXXXXXXXL版本的MySQL。”馬曉宇說道。
▲TiDB資料庫的原始架構
TiDB的關鍵立足點在於,它是一個能擴充套件的關係型資料庫。馬曉宇補充道,“除了可以替換分庫分表MySQL做TP業務,TiDB也非常適合中臺場景,可輕鬆同步MySQL生產庫、透明無障礙的跨分片查詢,實現資料實時落地、海量儲存(TiKV)允許多資料來源匯聚等。”
不僅如此,TiDB的程式碼全部開源。馬曉宇表示,“我們本身是一家開源的公司,我們也會參與一些其他的開源社群,公司員工很多都是資深的開源社群的參與者和貢獻者,我們希望和其他社群共贏,能有更多的小夥伴參加我們的開源。”
▲TiDB 1.0 vs 2.0
據悉,TiDB的更新換代速度非常快。TiDB自在2015年5月GitHub建立,而後於2016年6月釋出Beta版,2017年3月釋出RC2版本……2019年5月10日,TiDB 3.0.0-rc.1版本正式推出,相比 3.0.0 Beta.1,該版本對系統穩定性、易用性、功能、最佳化器、統計資訊以及執行引擎都做了很多改進。
TiFlash專案正在進行中
2019年之後,PingCAP會有哪些大動作?馬曉宇表示,“除了提升產品的效能、完善更多的功能之外,我們還會開展TiFlash專案。”據悉,TiFlash是一個相對獨立完整的分析型資料庫產品,透過Raft Learner獨立同步一套列存,Label進行物理隔離,使AP/TP作業互相無影響,從而解決HTAP系統資源隔離的難題。
在對TP端極低的消耗下,Raft Learner接入配合 MVCC 事務模型可以提供一致性的資料讀取,同時又兼顧了資源隔離。當讀取資料時,TiFlash傳送Raft索引校對請求。當資料同步到讀取請求傳送時間點的進度時,TiFlash才提供讀取。馬曉宇透露,“2019年將要釋出GA版本,包含TiSpark以及TiDB雙入口。”
馬曉宇認為,“最開始在業界,HTAP其實是一個marketing slogan。如果一個資料庫可以完美的融合TP和AP,那麼在設計上來說,這將是一個非常乾淨漂亮的做法。”他還表示,“未來,HTAP還會有更多待開發的場景,值得我們去探索。”
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/31509936/viewspace-2645759/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- 演講實錄|馬曉宇:When TiDB Meets SparkTiDBSpark
- Hello from PingCAP/TiDBPingCAPTiDB
- TiDB HTAP 上手指南丨新增 TiFlash 副本的工作原理TiDB
- PingCAP x 亞馬遜雲科技,為 TiDB 雲端體驗“加冕”PingCAP亞馬遜TiDB
- 讀TiDB原始碼聊設計:淺析HTAP的SQL最佳化器TiDB原始碼SQL
- HTAP 還可以這麼玩?丨TiDB 在 IoT 智慧園區的應用TiDB
- 對話馬曉軼:騰訊遊戲的「登月」持久戰遊戲
- 微眾銀行 TiDB HTAP 和自動化運維實踐TiDB運維
- 搶先報名丨新一代 HTAP 資料庫如何在雲上重塑?TiDB V6 線上釋出會即將揭曉!資料庫TiDB
- TiDB in 2023, 一次簡單的回顧丨PingCAP 唐劉TiDBPingCAP
- “曉”說運營商核心能力掌控之路
- 小試國產開源HTAP分散式NewSQL資料庫TiDB-v5.3.0分散式SQL資料庫TiDB
- TiDB 首批透過信通院 HTAP 資料庫基礎能力評測TiDB資料庫
- PingCAP Clinic 服務:貫穿雲上雲下的 TiDB 叢集診斷服務PingCAPTiDB
- PingCAP 唐劉:一個諮詢顧問對 TiDB Chat2Query Demo 提出的腦洞PingCAPTiDB
- PingCAP創始人劉奇:TiDB設計理念進化與大規模實踐PingCAPTiDB
- TiDB 5.3 發版 —— 跨越可觀測性鴻溝,實現 HTAP 效能和穩定性的新飛躍TiDB
- TiDB HTAP 遇上新能源車企:直營模式下實時資料分析的應用實踐TiDB模式
- 吳曉波羅振宇前仆後繼:自媒體的IPO之路
- Golang In PingCAPGolangPingCAP
- 騰訊馬曉軼:全球遊戲產業迎來全新探索時代遊戲產業
- MySQL到TiDB:Hive Metastore橫向擴充套件之路MySqlTiDBHiveAST套件
- 完美世界池宇峰:他的創業之路,連蘋果CEO庫克都想點贊創業蘋果
- 對話馬曉軼:騰訊遊戲2019鉅變前夜遊戲
- 馬曉軼的”中西對話”:遊戲業仍在發展早期、潛力巨大遊戲
- PingCAP 與阿里雲達成合作 雲資料庫 TiDB 上線阿里雲心選商城PingCAP阿里資料庫TiDB
- 黑馬程式設計師前端學習之路程式設計師前端
- 【PingCAP】Database Kernel EngineerPingCAPDatabase
- 【PingCAP】Database Storage EngineerPingCAPDatabase
- 【PingCAP】SRE & Tools EngineerPingCAP
- 專訪馬曉軼:超級數字場景,與騰訊電競產業的未來觀產業
- 騰訊馬曉軼:遊戲,正在成為一個超級數字場景遊戲
- 小米Note2與智慧手錶共同釋出? 答案馬上揭曉
- 攜程 x TiDB丨應對全球業務海量資料增長,一棧式 HTAP 實現架構革新TiDB架構
- SQL Server內建的HTAP技術SQLServer
- 2021DTCC PingCAPPingCAP
- TiDB Cloud 上線亞馬遜雲科技 Marketplace,為全球使用者提供雲端一棧式實時 HTAP 資料庫體驗TiDBCloud亞馬遜資料庫
- NFTScan x TiDB丨一棧式 HTAP 資料庫為 Web3 資料服務提供毫秒級多維查詢TiDB資料庫Web