6GB/s的效能體驗!深信服EDS如何讓HPDA應用又省又穩?
數字經濟時代,資料已成為新的核心生產要素。特別是在航空航天、氣象科學、 AI自動駕駛及生命科學等領域,資料呈現指數級增長,以資料密集型為典型特徵的高效能資料分析(HPDA)開始出現。 深信服分散式儲存 EDS不僅可以滿足計算密集型應用效能需求,也解決了傳統儲存方案擴充性不足與成本過高的問題。
傳統儲存陣列採用專用硬體,擴充性欠佳,且硬體成本過重。 在高效能運算場景下,傳統的儲存方案往往選擇採用支援RDMA協議的IB網路降低網路時延,而在HPDA這種資料密集型場景下,單一儲存叢集節點數量往往可達到兩位數甚至更多,一臺Infiniband交換機的成本相當於數臺儲存節點的硬體成本,在大規模交付的場景下,採用傳統的IB組網架構需要付出更高的成本。
↑ HPDA應用的高效能運算需求給儲存系統帶來挑戰
深信服EDS儲存架構 採用了run to complete和無鎖化程式設計模型 ,並最佳化了各模組之間的資料處理,實現系統內全IO棧的記憶體零複製,使整體效能得到了極大的提升。 在關鍵的IO路徑上,EDS採用自研的儲存通訊模組,結合共享記憶體來實現IO路徑上的資料零複製,減少記憶體複製消耗,降低儲存IO時延。
全對稱分散式架構
深信服分散式儲存EDS基於全對稱的分散式架構,單一分散式儲存叢集可以橫向擴充至數千節點,單一系統容量可擴充至EB級別,實現系統效能與容量線性增長,並且 隨著HPDA應用資料規模增大,EDS平均每TB資料的儲存成本會越來越低。
↑ 隨著儲存系統容量增加,SDS系統效能線性增長的同時,每TB資料儲存成本逐漸降低
支援RDMA RoCEv2協議
為了追求IO時延與成本之間的平衡,深信服分散式儲存EDS創新性地 選用RDMA RoCEv2網路 ,將儲存節點網路使用RDMA 協議接入, 實現低延遲極速網路傳輸,有效降低儲存系統建設成本。
平均儲存IO時延在us級別
深信服EDS儲存架構採用了run to complete和無鎖化程式設計模型,並最佳化了各模組之間的資料處理,實現系統內全IO棧的記憶體零複製,使整體效能得到了極大的提升。
↑ EDS關鍵IO流程示意圖
3節點通用2U伺服器即可提供6GB/s+吞吐
結合RDMA協議與NVME SSD介質,EDS可以同時發揮NVME SSD的效能優勢與RDMA技術的低時延優勢。採用3臺aStor-EDS1250裝置,每臺伺服器配置2塊NVME SSD與通用硬碟,即可提供超過6GB/s的效能體驗。
深信服分散式儲存EDS採用通用硬體降低使用者儲存投入成本,再結合過硬的軟體實力激發通用硬體的效能,提高 HPDA應用資料存取效率,為使用者提供高價效比的儲存解決方案,助力產業穩健發展。
以上就是本期《信服雲黑板報》的分享, 關注 “深信服科技”公眾號 ,持續 獲取更多 技術乾貨內容哦!
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/70009737/viewspace-2893999/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- 如何讓你的大檔案上傳變得又穩又快?
- 華為:既滿足使用者體驗,又節省功耗的App應用設計開發方法APP
- 讓人又愛又恨的ESLintEsLint
- Android進階;App開發怎樣又快又穩又清晰AndroidAPP
- “偷懶”不等於換皮 案例解析遊戲廠商如何又省又賺遊戲
- 讓人又愛又恨的Mysql多表查詢MySql
- MySQL讓人又愛又恨的多表查詢MySql
- 大佬都在用的自媒體文章一鍵釋出工具,又快又節省時間
- java中又實用又基本又容易錯的比較Java
- Trickbot惡意軟體又又又升級了!
- 微信小遊戲爆發式增長,如何保證小遊戲的版本迭代又快又穩?遊戲
- 這個公司的程式設計師人均月薪7萬+!騰訊又又又又又又又又漲薪了程式設計師
- 智慧數字經營3.0怎麼做才又穩又好?
- 刷臉認證如何實現人臉又快又準完成校驗?
- 前端踩坑系列《六》——讓人又愛又恨的npm包前端NPM
- 一款高效又省記憶體的讀寫Excel的JAVA框架記憶體ExcelJava框架
- 分享5款有趣又實用的軟體
- Flash,這把讓網際網路又愛又恨的雙刃劍
- 又又報錯
- 【解密】什麼樣的跨網檔案擺渡軟體 可以讓傳輸又簡單又安全?解密
- Redis真的又小又快又持久嗎Redis
- 公司又又又又要裁員啦!直面天命
- 又老效能又差,為什麼好多公司依然選擇 RabbitMQ?MQ
- 簡單又實用的pandas技巧:如何將記憶體佔用降低90%記憶體
- 用深度學習預測農業產量,省時省力又省心!深度學習
- 資料中心佈線: 節能又省錢薦
- 推薦5款乾淨又實用的軟體
- 響應式的 switchboard:讓又大又慢的Vue/AIpine 頁面爆快VueAI
- 視覺化BI工具如何選擇?這2款省心省時又省力!視覺化
- 如何改善應用啟動效能 | Facebook 應用的經驗分享
- 打造又快又準的廣告分析系統
- 當容器應用越發廣泛,我們又該如何監測容器?
- 讓你的 Python 程式碼優雅又地道Python
- zt 讓你的密碼好記又強大密碼
- Android效能優化:手把手教你如何讓App更快、更穩、更省(含記憶體、佈局優化等)Android優化APP記憶體
- 怎麼擺脫又臭又長的 Git 命令?Git
- TiDB 6.5 新特性解析丨過去一年,我們是如何讓 TiFlash 高效又穩定地榨乾 CPU?TiDB
- 報表的效能問題是怎樣產生的?又該如何解決?