阿里雲實時數倉Hologres年度釋出,解讀數倉新趨勢

程式碼派就是我發表於2022-01-12

1月7日,阿里雲實時數倉Hologres釋出最新版本,在成本、可用性、線上高可用等多方面進行了能力升級,行存吞吐提升100%,列存吞吐提升30%,支援行列共存,支援更加豐富的OLAP分析場景,支援Binlog全鏈路事件驅動加工,原生JSON資料型別和索引,進一步降低開發和運維成本,增強Hologres高併發的線上服務能力。

Hologres是一站式實時資料倉儲引擎,支援海量資料實時寫入、實時更新、更新及分析、實時分析,支援PB級資料多維分析與即席分析以及高併發低延遲的線上資料服務等,與MaxCompute、Flink、DataWorks深度融合,提供離線上一體化全棧數倉解決方案。

阿里雲資深技術專家果貝表示:“隨著企業數字化轉型的加劇,實時數倉技術開始逐漸從幕後走到臺前,被越來越多的企業作為生產系統支撐多種業務場景,一站式、線上化、敏捷化成為實時數倉新的發展趨勢”。

數倉建設過程中,開發、運維成本和線上高可用一直是難點和痛點。大資料場景上,處理的資料量和複雜度遠高於資料庫場景,傳統數倉通常是用不同的產品去適用不同的場景,比如ClickHouse常用於OLAP分析,HBase常用於服務場景,無法用一個產品滿足所有需求,多套系統非常容易造成架構冗餘,運維複雜等問題,導致成本只增不減。同時,隨著實時數倉被作為生產系統的廣泛使用,業務對系統的可用性和穩定性都提出了更高更嚴苛的要求,但實時數倉技術要實現生產高可用也需要面臨一定的取捨和挑戰,比如高效能的同時資源隔離、當機時的快速恢復能力等,以滿足不同場景的SLA。

基於以上問題,Hologres在成本、可用性、線上高可用等多方面進行了能力升級,進一步降低開發和運維成本,增強Hologres高併發的線上服務能力,行存吞吐提升100%,列存吞吐提升30%,支援行列共存,支援更加豐富的OLAP分析場景,支援Binlog全鏈路事件驅動加工,原生JSON資料型別和索引,加速半結構資料的檢索,堅持一個系統解決大資料問題的原則,降本增效,助力服務分析一體化建設。

image.png

在生產高可用方面,Hologres重磅釋出不同層次的隔離與高可用部署,支援單例項內資源組隔離,實現多租戶的計算資源隔離,支援多例項高可用部署(共享儲存),實現讀寫分離和故障隔離,並結合Hologres底層核心排程等能力,實現不同場景生產高可用。此外,Hologres在可用性、生態相容、企業級運維能力上不斷探索和更新,幫助企業實現新一代一站式實時數倉。

image.png

據瞭解,Hologres還多次支援了阿里巴巴雙11等大促活動,在2021年阿里巴巴雙11期間,經受住了每秒11.2億條的高速寫入,和每秒1.1億次的查詢峰值(包含點查和OLAP查詢),創歷史記錄。

除此之外,Hologres除了支援阿里巴巴的GMV實時大屏等業務外,還支援了實時搜尋推薦、菜鳥智慧物流、達摩院無人車配送等核心業務場景,這意味著實時數倉技術開始在阿里巴巴核心業務嶄露頭角,並在效能、生產穩定性等方面經受住了嚴格的生產考驗。


來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/31550522/viewspace-2851929/,如需轉載,請註明出處,否則將追究法律責任。

相關文章