從使用者真實需求出發,星環資料雲平臺 TDC 2.5 版本釋出
2021 年是數字化轉型關鍵的一年,據工信部訊息顯示,截止 2020 年,全國製造業數字化普及率為 69.8%,趨勢一片向好。與此同時,埃森哲(Accenture)的一份研究報告顯示,80%的中國企業正在進行數字化轉型,但真正釋放數字化潛力的只有 4%。這也就說明大部分企業的數字化轉型依然只是處於嘗試階段,即使大型企業也不例外。
星環科技透過大量的研究與觀察發現,大型企業普遍缺乏能夠滿足多租戶、彈性、靈活的數字化基礎設施。傳統的煙囪式系統架構導致企業內不同部門各自為政,重複建設自己的資料儲存、IT 裝置以及資料庫,而不同的業務架構之間資料也無法互聯互通,造成
資源重複投入、資料孤島等問題,阻礙企業的發展。企業也在努力尋找適合的數字化轉型方案。
在今天的主角星環資料雲平臺
Transwarp Data Cloud 2.5 亮相之前,先給大家分享兩組星環科技市場部近期做的使用者調研資料。這份調研資料清楚地展示了使用者的真實需求,在左邊這張圖中我們看到使用者對於大資料叢集服務功能關注度排名前五的包括:
平臺穩定性、功能完備性、平臺效能、平臺安全和易操作性。這些功能關乎客戶的研發投入、使用成本甚至業務的運轉。此外,隨著企業內大資料來源源不斷地產生,客戶的擴容需求也在與日俱增,從右邊這張圖中我們可以看到,被調研的所有使用者都會有年度擴容需求。
面對以上種種挑戰以及客戶的真實需求,星環資料雲平臺 Transwarp Data Cloud( 以下簡稱TDC )應運而生。TDC 底層基於容器面向大資料應用的雲原生作業系統Transwarp Cloud Operating System(以下簡稱TCOS),在一個 PaaS 平臺上提供包括 資料分析、應用開發和智慧建模等在內的完整的面向資料生命週期的工具鏈,加速企業數字化轉型。
基於星環 TDC 為江蘇農信建設的大資料 DAAS 應用平臺,提升江蘇農信資料輸出服務能力,透過
“資料+服務+應用”,產生閉環,促進生態,提升了
資料資產服務、AI 模型工廠、業務應用共享等資料能力;基於 TDC 為某運營商建設的容器化大資料能力開放平臺,實現了整體 IT 技術架構的容器化升級,
整體資源利用率提升 60%,大資料服務交付時間由一週縮減至 2 小時。目前,星環資料雲 TDC 已經在金融、能源、政府等多個行業落地。
今天,星環資料雲平臺TDC 再一次突破升級,迎來了 2.X 的長期支援版本 TDC 2.5,2.5 版本在原有基礎上做了全方位提升,可以概括為:
更穩定、更全面、更安全、更簡單、更強大。
接下來我們將從使用者的五大需求出發,解讀星環資料雲平臺 TDC 2.5 版本在平臺穩定性、功能完備性、平臺效能、平臺安全和易操作性上面的重要更新:
在平臺穩定性上,TDC 2.5 版本的雲原生底座星環雲原生作業系統- TCOS 架構全新升級:1)自研元件與 Kubernetes 解耦,相容性更好,且版本可以獨立持續演進;2)新增和最佳化了均衡排程、儲存排程、GPU 排程、應用感知排程等多種排程策略,提升大資料產品高效穩定執行;3)提供更加全面的監控能力,包括GPU、儲存、網路等裝置的監控,保障平臺高效穩定執行,可以支援大規模叢集,同時作為 TDC 2.x 系列的 LTS 版本,2.5 版本支援 TDC 2.x 版本平滑升級到 TDC 2.5 版本。
在功能完整性方面,作為國內外較早起步的資料雲 TDC ,經過多年打磨,功能可謂應有盡有。TDC 底層採用了統一的容器支撐平臺, 資料 PaaS、分析 PaaS、應用 PaaS 共享底層資源, 並透過彈性伸縮,來確保不同工作負載的資源需求;同時, TDC 支援 X86、ARM 等多種主流 CPU 架構以及 Linux / Windows / 國產作業系統,滿足企業軟硬體國產化的需求;TDC 還支援 GPU 獨佔與共享排程,滿足多種場景,並可提高 GPU 資源利用率。
而升級之後的資料雲平臺功能更加全面和豐富,TDC 2.5 基於企業大資料場景實施的最佳實踐經驗,內建了面向
大資料、資料庫、資料開發和人工智慧四種領域場景的 16 個產品組合,開箱即用,一鍵部署,快速向使用者提供成熟專業的資料能力和價值。
同時,新增基於視覺化介面開發應用的低程式碼開發平臺,使得非技術開發人員
無需編寫程式碼,直接透過拖拽元件和模型驅動的模式建立網頁或應用程式,有助於降低企業應用開發複雜性,進一步提升開發效率。
在平臺效能方面,TDC 2.5 做了很多平臺效能的最佳化,例如以儲存卷併發建立效能為例,較 2.4 版本吞吐量提升了 49.74%,平均延時降低了 31.7%,這樣在大資料擴容場景中,無論對於計算引擎或者儲存引擎這些有持久化儲存卷需求的工作負載,擴容速度有了較大的提升,從而可以更快響應業務的需求。
在平臺的安全性方面,TDC 2.5 除了持續加固和升級以避免漏洞帶來的安全性問題外,還增加了網路角色和節點角色規劃功能,網路角色可以劃分為管理網、業務網、監控網、外網,用於承載不同型別的網路流量,不同的網路之間可以透過安全策略進行管控;節點角色可以劃分為閘道器節點、出口節點、控制節點和工作節點,在不同的節點上部署不同型別的元件,在物理上做隔離。網路和節點角色劃分功能可以實現對東西向和南北向流量進行有效的訪問安全控制,確保平臺的穩定、安全、可靠。
在易操作上,為了解決大資料軟體配置檔案多,配置操作繁瑣複雜,TDC 在配置模版引擎的基礎上,提供了視覺化的配置中心:支援以圖形化和統一方式管理元件的配置檔案,高效管理元件的複雜配置;支援配置檔案修改歷史查詢,有效回溯每一次修改;在多人並行修改場景中,提供配置衝突對比和解決機制,防止配置丟失和衝突。
在 2.5 版本全方位升級的功能加持之下,TDC 可以更加出色地滿足客戶的多種業務場景,尤其對於需要給不同團隊或不同分公司賦能的集團型企業而言, TDC 提供的
“多租戶共享資料湖及資料開發” 能力,可以幫助其減少重複開發成本,大幅提升研發效率。
比如,一個 TDC 叢集使用「多租戶」方式建設統一的資料湖以及進行資料開發,可以服務集團中的不同團隊。其中叢集管理員能夠為每個團隊建立租戶並透過「配額管理」分配相應的資源,並按需配置「計量計費」方式。對於體量較小且業務有關聯的多個業務團隊,可以透過 TDC 的「元件共享」實現大資料計算引擎或者儲存引擎共享,減少資料的流轉,降低資源使用的費用。而對於隔離性和安全性需求更高的業務團隊,可以透過 TDC 「節點獨佔」租戶來保證該租戶有完全獨佔的底層節點資源。
在建設統一資料湖的過程中,集團會按照資料應入盡入的策略,將所有的資料納入統一的中心資料湖中。同時按照業務需求,將中心資料湖的資料流轉到對應租戶的儲存引擎中。
整個資料流轉過程透過 TDC 的 「資料商城」和「平臺安全管控」保障了資料的安全性與流通性。
由於同一個租戶上的業務系統在不同的時間對於資源的需求不同,TDC 平臺提供了
「彈性擴縮容」的功能,可以透過配置合理的策略來保障不同業務系統在不同時間的資源需求,保障了業務連續性,並提升了資源利用率。
另外,TDC 平臺提供了
完整的資料業務「開發入口」與各種 API,客戶可以透過統一的資料業務開發平臺進行高效開發與管理。
目前,星環科技新一代智慧資料雲平臺 Transwarp Data Cloud(TDC)已經在眾多行業有成熟的全方位解決方案落地,滿足了各種資料處理場景的需求,實現了企業資料與應用的生態化建設。未來星環將在資料雲領域持續深耕,助力企業不斷釋提升大資料能力,引領企業數字化轉型升級浪潮。
TDC白皮書領取
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/69994106/viewspace-2848334/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- 星環資料雲平臺 TDC 3.1 釋出,新增滾動重啟、儲存回收站等八大核心功能
- 【案例】基於星環科技資料雲平臺TDC為富國基金建設萬能的資料湖
- 星環科技資料安全管理平臺 Defensor重磅釋出
- 星圖資料釋出國內首個“大資料開放平臺”大資料
- TDC 3.0 從資料分析到資料流通,資料雲擴充新場景
- 新功能速遞 | OceanBase 雲平臺 3.1 版本釋出啦!
- OCP2.5版本釋出啦!
- 低程式碼開發平臺,可無需程式碼快速釋出APIAPI
- 星環科技重磅推出資料要素流通平臺Transwarp Navier
- Water 2.5 釋出,一站式服務治理平臺
- 綠盟資料安全運營平臺ISOP-DS新版本正式釋出
- SmartX 釋出管理平臺 CloudTower 2.0 版本Cloud
- 在雲環境中實現成功的現代資料分析平臺
- TRONex智慧合約APP開發平臺(真實平臺)APP
- 雲從科技釋出國家人工智慧基礎資源公共服務平臺人工智慧
- 便捷、高效、智慧—從運維視角看星環科技大資料基礎平臺TDH運維大資料
- DBAPI 資料介面釋出平臺功能介紹API
- JNPF快速開發平臺3.0版本即將重磅釋出
- oracle 11.2.0.2 版本for aix和hp平臺釋出OracleAI
- 引入雲真機平臺真能提高研發效能嗎?
- 阿里雲資料庫PostgreSQL 13大版本重磅釋出阿里資料庫SQL
- AI助力新藥研發 騰訊釋出「雲深智藥」平臺AI
- 迅雷釋出星域雲與迅雷鏈開放平臺 矩陣生態搭建完畢矩陣
- 有道詞典釋出Linux版本,實現主流平臺全覆蓋Linux
- 雲平臺雲環境之要素
- Google釋出跨雲Serverless管理平臺KnativeGoServer
- 釋出 Spinnaker 1.0:持續的雲交付平臺
- vivo版本釋出平臺:頻寬智慧調控最佳化實踐-平臺產品系列03
- 資料安全綜治平臺新版本釋出,資料安全從獨立作戰走向聯防聯動
- 企業數字化轉型的四個階段,星環科技自研資料雲平臺全部搞定
- 最新的Java SE平臺和JDK版本釋出計劃JavaJDK
- 美創科技與星環科技大資料平臺完成相容互認證!大資料
- 阿里雲釋出全球首個一站式大資料平臺“數加”阿里大資料
- 跨平臺的.NET執行環境 Mono 3.2.7釋出!Mono
- 卓豪釋出IT大資料分析平臺,整合ITSM系統大資料
- 自媒體一鍵釋出平臺,3分鐘釋出全平臺
- 星環科技多模型資料統一儲存的大資料分散式儲存平臺方案分享模型大資料分散式
- 美創資料支撐平臺釋出,全新升級賦能資料治理