DTCC 2022 | 聚焦湖倉一體資料智慧新趨勢,助推大資料基礎軟體自主發展

丸喵喵發表於2022-12-21

12月14日至16日,由IT168聯合旗下ITPUB、ChinaUnix兩大技術社群主辦的第13屆中國資料庫技術大會,舉行線上直播。大會以“資料智慧 價值創新”為主題,邀請眾多業內技術專家聯手帶來一場資料庫的思想盛宴。


滴普科技作為湖倉一體資料智慧基礎軟體獨角獸,構建的核心產品FastData包含 實時湖倉引擎DLink、資料智慧開發治理平臺DataFacts以及資料分析平臺DataSense,成為基礎軟體領域的典型產品。會上,FastData產品線DataFacts產品總經理劉波、DLink產品總經理馮森,分別圍繞資料智慧平臺、實時湖倉引擎架構發表了主題演講。

1

劉波:構建一站式資料智慧開發治理平臺

隨著數字化轉型的深入實踐,很多企業都建設了資料平臺,但大多存在著資料模型最佳化難、資料開發協同難、資料任務型別多、資料質量最佳化難、資料管理無體系等難點。在此背景下,劉波發表了《FastData DataFacts建設資料智慧平臺的實踐》。

針對企業面臨的痛點,滴普科技構建的資料智慧開發治理平臺DataFacts,主要面向PB級實時/離線資料開發、運維場景,可以提供集資料整合、資料建模、資料開發、 資料質量、資料服務、資料安全等能力於一體的一站式資料開發平臺,遮蔽複雜的技術環節,在保證資料安全底線的基礎上,讓資料工程師專注於面向業務需求的資料開發,實現易用、便捷、安全的高質量資料生產能力。

面向企業資料資源散、亂、差等問題,DataFacts透過資料標準及規範、資料建模、資料質量、資料資源管理、及資料安全等能力,對企業資料資源進行統一的管理與運營,提升資料質量和運營效率,讓資料可用、好用、易用。

值得注意的是,DataFacts不同於大多資料智慧產品,它具備了實時高效能資料同步、技術相容開放、雲中立、生態開放、一站式資料開發等優勢。尤其是雲中立理念,可以相容主流公有云,支援混合雲環境,打通雲壁壘,保障各雲之間的資料一致性管理。

DataFacts產品架構圖

在劉波看來,企業資料智慧平臺在資料開發和資料服務環節必須讓整個系統協同起來,貫穿資料資源化全流程,才能快速定位企業需求,幫助企業提升資料處理能力和資料管理能力的成熟度。DataFacts正是基於此產品理念,最終讓企業資料智慧平臺建設快、門檻低,實現企業資料開發的專注高效、資料任務智慧化監控,進而完成資料資產的標準化,讓資料賦能業務。

2

馮森:湖倉一體架構支撐企業構建資料基礎底座

當然,資料智慧開發治理平臺想要實現統一排程任務,必須擁有大資料底座或對應的數倉來支撐,滴普科技構建的實時湖倉引擎DLink便是其中之一。就此,馮森分享了湖倉一體架構資料智慧技術趨勢,並發表了《FastData DLink 實時湖倉引擎的架構設計與實踐》主題演講。


馮森表示,隨著資料量的極速攀升、資料型別的多樣性變化,以MPP、Hadoop/資料湖為代表的傳統技術棧,已無法滿足企業複雜資料實時智慧化處理需求。而湖倉一體資料架構的平臺吸收了資料湖與數倉的優點,可以支援多種資料型別及各種各樣的工作負載,適應大型企業多級+多租戶的資料場景,正成為新的資料平臺技術發展趨勢。


作為資料智慧服務商,滴普科技打造的實時湖倉引擎DLink,基於Iceberg、Trino、Flink技術棧實現功能最佳化,具備整庫資料入湖、全鏈路CDC、統一後設資料服務、資料快取、資料許可權控制、物化檢視、表自動運維、多租戶和多湖管理等核心功能,支援流批一體資料處理、資料分析、機器學習等多工作負載,及PB級多模資料儲存與處理,無縫連線大資料生態,提供一站式資料探索與資料開發能力。

DLink產品架構圖
3

聚焦湖倉一體資料智慧基礎軟體,助推大資料基礎軟體國產化

目前,FastData已實踐於資料智慧基礎設施、供應鏈數智化、經營財務、營銷運營、工業生產等典型場景,成功服務200餘家大中型企業,幫助大型國央企完善資料基礎設施建設,全面實現國產化。


當下,基礎軟體國產化替代趨勢正在加速發展,未來,滴普科技將持續發揮湖倉一體資料智慧基礎軟體優勢,結合企業國產化替代需求,賦能企業業務創新增長,實現資料資產價值的最大化效能,助推大資料國產基礎軟體生態體系高質量發展。


來自 “ DEEPEXI滴普科技 ”, 原文作者:DEEPEXI滴普科技;原文連結:https://mp.weixin.qq.com/s/tm95al1JtNM071csbeOAGQ,如有侵權,請聯絡管理員刪除。

相關文章