東方國信:CirroData行走在資料庫百花齊放時代

qing_yun發表於2021-02-19

在DTCC2020大會上,有人說中國資料庫臥薪嚐膽20年終於迎來了一個好時代,這個時代百花齊放、百家爭鳴,卻也機遇與挑戰並存。會上,IT168專訪了東方國信CirroData資料庫研發中心總經理金正皓,瞭解資料庫技術的發展趨勢,以及CirroData資料庫的特性。

東方國信行雲資料庫CirroData研發中心總經理 金正皓

國產資料庫發展的四個階段

近兩年逐漸看到一些重大的核心業務系統遷移到國產資料庫上,國產資料庫正在不斷突破自身,資料庫作為基礎軟體三大件之一,更是受到前所未有的重視。在金正皓看來,國產資料庫的自主可控之路大概經歷了四個階段。

第一階段是跟隨階段。2000年前後,主要跟隨國外的Oracle、DB2等,國內當時主要是單機版資料庫,都是國產資料庫先驅,面臨很大的困境,技術比國外的資料庫技術晚十年以上,國外資料庫成熟的產品、成熟的客戶、成熟的使用案例都是國內跟隨者所不具備的,集中在OLTP場景下,透過國家的扶持,商業環境比較艱難,是國產資料庫技術的拓荒者。

第二個階段是2009年前後,針對資料倉儲領域的MPP資料庫技術蓬勃發展,國產MPP資料庫領域與國外同類產品的技術差距逐漸縮小,同時國內客戶對國產MPP的接受度逐漸提升。這個階段MPP資料庫主要應用在非核心業務場景,客戶對系統可靠性、穩定性接受度較好。國產MPP資料庫在資料倉儲領域得到了較大的發展。

第三階段是2010-2020年技術大爆發階段,在大資料、網際網路、開源等技術的發展推動下,現有資料庫技術無法滿足國內企業應用場景的規模和效能等需求,國內技術人員對資料庫核心相關技術掌握越來越深入和全面。一些雲端計算廠商以及部分資料庫廠商,多是基於MySQL、PG等開源資料庫做一些改造;CirroData也是從第三階段起航。但CirroData並沒有採用基於開源資料庫進行改造的開發路線,而是由東方國信完全自主研發的國產分散式資料庫。

第四階段,隨著國家對自主可控的需求不斷提高,國產資料庫迎來更大的發展機遇。

金正皓認為國產資料庫從早期的跟隨到替代國外產品,未來一定會在資料庫行業出現區域性的領先,最終走向全面的突破。就像2020年的疫情讓所有人始料未及,未來也依然存在著不確定性。“不確定性也是機會,說明現在資料庫市場處於野蠻生長的階段,這個階段是必須經歷的,但我認為未來會殊途同歸,未來會透過技術的聚焦,透過客戶的聚焦,透過行業的聚焦,透過資本的聚焦,從百花齊放會逐漸聚焦到某些領域的某些廠家。”金正皓告訴IT168。

CirroData的分散式雲化之路

東方國信是國內較早做商務智慧(BI)的綜合大資料公司,從2002年開始做國內電信行業和金融行業的資料倉儲建設,2011年上市,同期開始了CirroData的資料庫自研之路。

在東方國信為電信行業和金融行業構建資料倉儲的過程中,隨著業務量和複雜程度的不斷提高,越來越感覺到集中式資料庫和MPP資料庫都不足以滿足其需求,定位為分散式雲化資料庫的CirroData能有效解決這些問題。

比如當時在電信領域,在早期企業資料倉儲專案的架構中,設計了大量的多維立方體模型,用於支撐報表和多維分析,隨著時間的進展,大量立方體很少被使用,但是這些立方體的仍然被定期加工,浪費了儲存和計算資源,某企業粗略統計有60%到80%立方體被廢棄。CirroData具備高效能統計分析的能力,可以基於明細資料快速生成相關分析資料,支撐全維度全指標的即席分析。很大程度上替代了原有的多維立方體,釋放了儲存和算力。

2016年CirroData支援儲存計算分離架構,為下一代雲原生架構提供了底層技術支撐,並持續解決算力、儲存的共享和隔離問題,2018年是CirroData的重要節點,當時基於電信運營商大規模資料集中的IT架構體系考慮,提出了邏輯集中、物理分散的大規模跨地域資料中心架構。

整體來看,CirroData是一個產品家族,包含了OLAP和OLTP產品和HTAP產品,跨域多資料中心平臺(Multi-data Center,MDC)產品,時序資料庫、圖資料庫等,目前在OLAP場景比較成熟,已經在全國二十八省擁有數百客戶,跨域多資料中心平臺也有逐步推廣應用。

CirroData是一款分散式雲資料庫,金正皓對於分散式資料庫和集中式資料庫的關係有自己的判斷。“我認為集中式永遠有它存在的空間。”他指出集中式架構仍然適用於在高階使用者的極端場景需求,在分散式架構成熟可靠之前,該場景或許在未來十年仍然存在,但這部分市場會逐步縮小。此外,集中式架構還存在一些長尾使用者,它的資料規模、併發量、資料量都不大,類似於部門級應用或者小企業應用,依然有集中式架構的需求。他認為未來長尾使用者可能會逐步遷移到分散式系統裡,以免產生資料孤島。

回望剛剛過去的2020年,金正皓認為大資料在新冠疫情期間的防疫、防控讓全國人民真正接觸到大資料的應用,他對未來也充滿信心,“中國畢竟是作為一個龐大體量的經濟體,客戶需求應該是根本。有中國這麼大的資料量和豐富的應用場景,下一個十年內中國的資料庫技術應該能夠擁抱世界。”

來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/69925873/viewspace-2757631/,如需轉載,請註明出處,否則將追究法律責任。

相關文章