6GB/s的效能體驗!深信服EDS如何讓HPDA應用又省又穩?

雲集技術學社發表於2022-05-13

數字經濟時代,資料已成為新的核心生產要素。特別是在航空航天、氣象科學、 AI自動駕駛及生命科學等領域,資料呈現指數級增長,以資料密集型為典型特徵的高效能資料分析(HPDA)開始出現。 深信服分散式儲存 EDS不僅可以滿足計算密集型應用效能需求,也解決了傳統儲存方案擴充性不足與成本過高的問題。

 

傳統儲存陣列採用專用硬體,擴充性欠佳,且硬體成本過重。 在高效能運算場景下,傳統的儲存方案往往選擇採用支援RDMA協議的IB網路降低網路時延,而在HPDA這種資料密集型場景下,單一儲存叢集節點數量往往可達到兩位數甚至更多,一臺Infiniband交換機的成本相當於數臺儲存節點的硬體成本,在大規模交付的場景下,採用傳統的IB組網架構需要付出更高的成本。

 

HPDA應用的高效能運算需求給儲存系統帶來挑戰

深信服EDS儲存架構 採用了run to complete和無鎖化程式設計模型 ,並最佳化了各模組之間的資料處理,實現系統內全IO棧的記憶體零複製,使整體效能得到了極大的提升。 在關鍵的IO路徑上,EDS採用自研的儲存通訊模組,結合共享記憶體來實現IO路徑上的資料零複製,減少記憶體複製消耗,降低儲存IO時延。

全對稱分散式架構

深信服分散式儲存EDS基於全對稱的分散式架構,單一分散式儲存叢集可以橫向擴充至數千節點,單一系統容量可擴充至EB級別,實現系統效能與容量線性增長,並且 隨著HPDA應用資料規模增大,EDS平均每TB資料的儲存成本會越來越低。

 

隨著儲存系統容量增加,SDS系統效能線性增長的同時,每TB資料儲存成本逐漸降低

支援RDMA RoCEv2協議

為了追求IO時延與成本之間的平衡,深信服分散式儲存EDS創新性地 選用RDMA RoCEv2網路 ,將儲存節點網路使用RDMA 協議接入, 實現低延遲極速網路傳輸,有效降低儲存系統建設成本。

平均儲存IO時延在us級別

深信服EDS儲存架構採用了run to complete和無鎖化程式設計模型,並最佳化了各模組之間的資料處理,實現系統內全IO棧的記憶體零複製,使整體效能得到了極大的提升。

 

EDS關鍵IO流程示意圖

3節點通用2U伺服器即可提供6GB/s+吞吐

結合RDMA協議與NVME SSD介質,EDS可以同時發揮NVME SSD的效能優勢與RDMA技術的低時延優勢。採用3臺aStor-EDS1250裝置,每臺伺服器配置2塊NVME SSD與通用硬碟,即可提供超過6GB/s的效能體驗。

 

深信服分散式儲存EDS採用通用硬體降低使用者儲存投入成本,再結合過硬的軟體實力激發通用硬體的效能,提高 HPDA應用資料存取效率,為使用者提供高價效比的儲存解決方案,助力產業穩健發展。

 

以上就是本期《信服雲黑板報》的分享, 關注 “深信服科技”公眾號 ,持續 獲取更多 技術乾貨內容哦!

 


來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/70009737/viewspace-2893999/,如需轉載,請註明出處,否則將追究法律責任。

相關文章