從使用者真實需求出發,星環資料雲平臺 TDC 2.5 版本釋出

星環科技發表於2021-12-17

2021 年是數字化轉型關鍵的一年,據工信部訊息顯示,截止 2020 年,全國製造業數字化普及率為 69.8%,趨勢一片向好。與此同時,埃森哲(Accenture)的一份研究報告顯示,80%的中國企業正在進行數字化轉型,但真正釋放數字化潛力的只有 4%。這也就說明大部分企業的數字化轉型依然只是處於嘗試階段,即使大型企業也不例外。
星環科技通過大量的研究與觀察發現,大型企業普遍缺乏能夠滿足多租戶、彈性、靈活的數字化基礎設施。傳統的煙囪式系統架構導致企業內不同部門各自為政,重複建設自己的資料儲存、IT 裝置以及資料庫,而不同的業務架構之間資料也無法互聯互通,造成 資源重複投入、資料孤島等問題,阻礙企業的發展。企業也在努力尋找適合的數字化轉型方案。
在今天的主角星環資料雲平臺  Transwarp Data Cloud 2.5 亮相之前,先給大家分享兩組星環科技市場部近期做的使用者調研資料。這份調研資料清楚地展示了使用者的真實需求,在左邊這張圖中我們看到使用者對於大資料叢集服務功能關注度排名前五的包括: 平臺穩定性、功能完備性、平臺效能、平臺安全和易操作性。這些功能關乎客戶的研發投入、使用成本甚至業務的運轉。此外,隨著企業內大資料來源源不斷地產生,客戶的擴容需求也在與日俱增,從右邊這張圖中我們可以看到,被調研的所有使用者都會有年度擴容需求。

從使用者真實需求出發,星環資料雲平臺 TDC 2.5 版本釋出


面對以上種種挑戰以及客戶的真實需求,星環資料雲平臺 Transwarp Data Cloud( 以下簡稱TDC )應運而生。TDC 底層基於容器面向大資料應用的雲原生作業系統Transwarp Cloud Operating System(以下簡稱TCOS),在一個 PaaS 平臺上提供包括 資料分析、應用開發和智慧建模等在內的完整的面向資料生命週期的工具鏈,加速企業數字化轉型。


基於星環 TDC 為江蘇農信建設的大資料 DAAS 應用平臺,提升江蘇農信資料輸出服務能力,通過  “資料+服務+應用”,產生閉環,促進生態,提升了 資料資產服務、AI 模型工廠、業務應用共享等資料能力;基於 TDC 為某運營商建設的容器化大資料能力開放平臺,實現了整體 IT 技術架構的容器化升級, 整體資源利用率提升 60%,大資料服務交付時間由一週縮減至 2 小時。目前,星環資料雲 TDC 已經在金融、能源、政府等多個行業落地。
今天,星環資料雲平臺TDC 再一次突破升級,迎來了 2.X 的長期支援版本 TDC 2.5,2.5 版本在原有基礎上做了全方位提升,可以概括為: 更穩定、更全面、更安全、更簡單、更強大。
接下來我們將從使用者的五大需求出發,解讀星環資料雲平臺 TDC 2.5 版本在平臺穩定性、功能完備性、平臺效能、平臺安全和易操作性上面的重要更新:
在平臺穩定性上,TDC 2.5 版本的雲原生底座星環雲原生作業系統- TCOS 架構全新升級:1)自研元件與 Kubernetes 解耦,相容性更好,且版本可以獨立持續演進;2)新增和優化了均衡排程、儲存排程、GPU 排程、應用感知排程等多種排程策略,提升大資料產品高效穩定執行;3)提供更加全面的監控能力,包括GPU、儲存、網路等裝置的監控,保障平臺高效穩定執行,可以支援大規模叢集,同時作為 TDC 2.x 系列的 LTS 版本,2.5 版本支援 TDC 2.x 版本平滑升級到 TDC 2.5 版本。
在功能完整性方面,作為國內外較早起步的資料雲 TDC ,經過多年打磨,功能可謂應有盡有。TDC 底層採用了統一的容器支撐平臺, 資料 PaaS、分析 PaaS、應用 PaaS 共享底層資源, 並通過彈性伸縮,來確保不同工作負載的資源需求;同時, TDC 支援 X86、ARM 等多種主流 CPU 架構以及 Linux / Windows / 國產作業系統,滿足企業軟硬體國產化的需求;TDC 還支援 GPU 獨佔與共享排程,滿足多種場景,並可提高 GPU 資源利用率。
而升級之後的資料雲平臺功能更加全面和豐富,TDC 2.5 基於企業大資料場景實施的最佳實踐經驗,內建了面向 大資料、資料庫、資料開發和人工智慧四種領域場景的 16 個產品組合,開箱即用,一鍵部署,快速向使用者提供成熟專業的資料能力和價值。

從使用者真實需求出發,星環資料雲平臺 TDC 2.5 版本釋出


同時,新增基於視覺化介面開發應用的低程式碼開發平臺,使得非技術開發人員 無需編寫程式碼,直接通過拖拽元件和模型驅動的模式建立網頁或應用程式,有助於降低企業應用開發複雜性,進一步提升開發效率。
在平臺效能方面,TDC 2.5 做了很多平臺效能的優化,例如以儲存卷併發建立效能為例,較 2.4 版本吞吐量提升了 49.74%,平均延時降低了 31.7%,這樣在大資料擴容場景中,無論對於計算引擎或者儲存引擎這些有持久化儲存卷需求的工作負載,擴容速度有了較大的提升,從而可以更快響應業務的需求。
在平臺的安全性方面,TDC 2.5 除了持續加固和升級以避免漏洞帶來的安全性問題外,還增加了網路角色和節點角色規劃功能,網路角色可以劃分為管理網、業務網、監控網、外網,用於承載不同型別的網路流量,不同的網路之間可以通過安全策略進行管控;節點角色可以劃分為閘道器節點、出口節點、控制節點和工作節點,在不同的節點上部署不同型別的元件,在物理上做隔離。網路和節點角色劃分功能可以實現對東西向和南北向流量進行有效的訪問安全控制,確保平臺的穩定、安全、可靠。
在易操作上,為了解決大資料軟體配置檔案多,配置操作繁瑣複雜,TDC 在配置模版引擎的基礎上,提供了視覺化的配置中心:支援以圖形化和統一方式管理元件的配置檔案,高效管理元件的複雜配置;支援配置檔案修改歷史查詢,有效回溯每一次修改;在多人並行修改場景中,提供配置衝突對比和解決機制,防止配置丟失和衝突。
在 2.5 版本全方位升級的功能加持之下,TDC 可以更加出色地滿足客戶的多種業務場景,尤其對於需要給不同團隊或不同分公司賦能的集團型企業而言, TDC 提供的  “多租戶共享資料湖及資料開發” 能力,可以幫助其減少重複開發成本,大幅提升研發效率。
比如,一個 TDC 叢集使用「多租戶」方式建設統一的資料湖以及進行資料開發,可以服務集團中的不同團隊。其中叢集管理員能夠為每個團隊建立租戶並通過「配額管理」分配相應的資源,並按需配置「計量計費」方式。對於體量較小且業務有關聯的多個業務團隊,可以通過 TDC 的「元件共享」實現大資料計算引擎或者儲存引擎共享,減少資料的流轉,降低資源使用的費用。而對於隔離性和安全性需求更高的業務團隊,可以通過 TDC 「節點獨佔」租戶來保證該租戶有完全獨佔的底層節點資源。

從使用者真實需求出發,星環資料雲平臺 TDC 2.5 版本釋出


在建設統一資料湖的過程中,集團會按照資料應入盡入的策略,將所有的資料納入統一的中心資料湖中。同時按照業務需求,將中心資料湖的資料流轉到對應租戶的儲存引擎中。 整個資料流轉過程通過 TDC 的 「資料商城」和「平臺安全管控」保障了資料的安全性與流通性。

從使用者真實需求出發,星環資料雲平臺 TDC 2.5 版本釋出



由於同一個租戶上的業務系統在不同的時間對於資源的需求不同,TDC 平臺提供了 「彈性擴縮容」的功能,可以通過配置合理的策略來保障不同業務系統在不同時間的資源需求,保障了業務連續性,並提升了資源利用率。
另外,TDC 平臺提供了 完整的資料業務「開發入口」與各種 API,客戶可以通過統一的資料業務開發平臺進行高效開發與管理。
目前,星環科技新一代智慧資料雲平臺 Transwarp Data Cloud(TDC)已經在眾多行業有成熟的全方位解決方案落地,滿足了各種資料處理場景的需求,實現了企業資料與應用的生態化建設。未來星環將在資料雲領域持續深耕,助力企業不斷釋提升大資料能力,引領企業數字化轉型升級浪潮。

TDC白皮書領取


來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/69994106/viewspace-2848334/,如需轉載,請註明出處,否則將追究法律責任。

相關文章