RestCloud ETL資料交換平臺,支援分散式部署

RestCloud發表於2021-08-23

RestCloud ETL資料交換平臺是基於微服務架構完全自主研發和創新的新一代資料整合平臺,透過視覺化的拖、拉、拽即可完成資料整合流程的構建並實現資料抽取、轉換、清洗、脫敏、載入等功能,從架構、易用性、傳輸效能、視覺化、功能豐富性等方面均全面超越Kettle等開源ETL工具。透過容器化技術RestCloud ETL支援大規模的分散式部署架構,可以根據資源利用率實現動態的彈性伸縮實現上萬流程的同時排程與併發執行。透過疊加API服務平臺即可快速落地構建一個輕量級的資料中臺。

一、平臺的主要優勢

1、基於微服務架構開發,支援分散式部署,同時支援上萬流程的排程與執行;

2、專為解決大型企業的複雜資料整合場景而研發;

3、支援完整的跨資料庫事務控制,保證多個資料來源傳輸資料高度一致性;

4、支援多資料來源之間資料流的合併、拆分、聚合等操作;

5、支援超過40+資料來源的連結包括國產資料庫;

6、支援自定義資料檢查規則、質量規則、補全規則等可以實現複雜的資料整合需求;

7、支援各種不同資料來源之間資料型別的自動轉換,極大提升整合流程的構建速度;

8、全Web前後端分離架構,所有能力均釋出為API可輕鬆對接第三方業務系統;

9、支援批流一體化處理,大幅提升資料的採集和同步時間。

二、實時資料流支援

RestCloud ETL資料交換平臺支援多種實時資料流的接入,支援Kafka實時資料流接入、支援MQTT物聯網資料實時接入、支援HTTP實時資料流接入,實時資料流經過清選、轉換、計算後可以實時儲存到資料倉儲中。

三、支援對接各種電商及SaaS系統

平臺已內建多種電商及SaaS系統的對接介面及認證方式,透過資料整合平臺可以快速的協助企業把SaaS及電商平臺中的資料拉取到私有的資料庫中,透過平臺的清洗、轉換、運算功能可以一步完成資料對接工作,大幅提升資料的時效性降低資料整合成本。

四、主要適用場景

RestCloud ETL資料交換平臺的目標是幫助企業快速實現資料整合、資料採集、資料服務於一體的輕量級資料中臺產品,透過視覺化的元件拖拽,實現快速的從資料採集、傳輸、轉換、脫敏、運算到服務釋出的全過程;透過資料整合/交換平臺,可以在多個業務系統之間實現複雜的資料分發以及推送,同時也支援跨集團公司的資料傳輸與共享釋出,協助企業快速構建輕量級資料中臺等場景;同時RestCloud支援實時資料流的處理,可以實時接入物聯網、Kafka等的實時資料流並進行實時運算處理後存入企業的實時數倉中。


來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/70005218/viewspace-2788346/,如需轉載,請註明出處,否則將追究法律責任。

相關文章