資料基礎架構如何演進,西部資料有話說

dobigdata發表於2020-12-16

一家自動駕駛企業,其自動駕駛訓練車隊每天資料增長量達到數十PB;一家中型三甲醫院每月光PACS系統就能產生數十TB的影像資料,並且對於效能要求極高;一家海上風電場,數千家風機的各種物聯網裝置每天實時產生資料流,需要雲、邊、端構建起強大的資料基礎設施才能支撐起如此規模的應用;一家直播巨頭,每月歸檔資料就高達數PB,並且需要隨時配合審計和法規要求呼叫歸檔資料……

相比過去,如今的應用在特點、規模、複雜度等方面是今非昔比。如果說使用者在業務層最直觀地感受到應用層的變化;那麼,資料基礎架構廠商則在最底層敏銳地體驗到了新應用所帶來的變革。正如西部資料公司副總裁兼中國區業務總經理劉鋼所言:“如今業務場景的多樣化帶來了對於底層資料儲存的不同需求,不同應用對於效能、容量、時延、功耗、成本等也是不盡相同。”

也正因為如此,像西部資料這樣聚焦在資料基礎架構的廠商,近年來力推創新儲存架構--分層儲存,透過更加精細化的管理與分層,以及多種組合來滿足應用的需求。

創新儲存架構的“新”在哪裡

所謂分層儲存,其實並不是一個新概念,自從SSD進入到資料中心之後,分層儲存概念就開始被業界所提及。但隨著使用者應用豐富化,以及儲存介質的加速發展,分層儲存其內涵出現了新的變化。

西部資料介紹,在新的儲存架構模型中,資料根據應用特點被分為了極熱儲存、熱儲存、溫儲存、冷儲存和極冷儲存共5種型別,這五種資料型別往往需要透過不同的儲存盤來滿足需求。

資料基礎架構如何演進,西部資料有話說

因此可見,所謂創新儲存架構,首先體現的就是儲存架構模型更加細分化,透過分而治之的策略讓應用資料儲存在合適的介質與產品上。例如,極熱儲存採用記憶體DRAM,熱儲存採用高效能SSD,溫儲存則採用主流的SSD/HDD,冷儲存適合採用傳統大容量企業級 HDD,極冷儲存則會考慮用SMR HDD來把一些隨機寫入變成順序寫入,更進一步地提高儲存的密度。

其次,具體到每一層儲存,都需要有更加創新的技術來支撐資料應用。以極冷儲存為例,主要應用在歸檔領域,印象之中似乎是藍光或者磁帶儲存產品的市場,但當前歸檔所面臨的資料規模,以及法規與審計對於歸檔資料呼叫,推動了新的創新發生。正如西部資料釋出的20TB SMR HDD,在功耗、容量上不斷突破與創新,正在成為極冷儲存最為理想的儲存介質。

最後,雖然資料儲存架構正在走向分層,但並不意味著彼此孤立,而是需要在整體層面進行聯動與組合,以滿足資料中心應用多樣化的需求。

“在當前資料中心中,主要面臨資料增長迅速、儲存效能需求倍增、追求極致TCO以及構建綠色能耗體系這幾大核心的訴求。我們認為,更加細分和智慧的分層儲存架構是滿足這些訴求最佳方式。”劉鋼表示道。

快閃記憶體如何帶來極致能力

在所有的儲存介質中,快閃記憶體無疑最受矚目的明星。隨著快閃記憶體容量、效能的穩步提升,如何用好快閃記憶體也是當前很多使用者所面臨的挑戰。

對此,西部資料思路主要有兩點。其一,繼續對快閃記憶體進行細分,比如,西部資料Ultrastar DC NVMe SSD包括SN640、SN840:SN640適合混合負載的,大概70%讀30%寫的場景;SN840適合高效能應用場景,50%讀50%寫。從SN640到 SN840,IOPS從469K到780K,表面差別並不大,但是在技術上,從NAND顆粒到控制器連線通道的數量,都有很大的差異。

資料基礎架構如何演進,西部資料有話說

其二,西部資料所有快閃記憶體產品都採用了縱向整合的策略。所謂縱向整合,即整合完全自主的NAND Flash、SSD控制器和韌體於一體,最大限度將快閃記憶體的效能和穩定性發揮到極致。這種縱向整合所帶來的極致能力,顯然是當下使用者們在各種應用中最為迫切需要的。

劉鋼介紹道:“只有將NAND顆粒、控制器、韌體做整體最佳化,才能讓快閃記憶體的效能發揮到極致;同時,遇到大負載時,快閃記憶體的極致效能依然可以保持穩定,西部資料恰恰能夠在這些方面做到業界領先。”

以西部資料Ultrastar DC NVMe SN640和SN840為例,其控制器中有兩塊晶片,分別處理前段FTL(Flash Transition Layer)和後端Flash Management。前端的FTL晶片包含多個獨立的處理器,同時處理I/O輸入輸出及內部的後臺最佳化工作;後端FM晶片也包含獨立處理器多通道管理NAND FLASH。正因為如此,新款的西部資料Ultrastar DC SN840 NVMe SSD可以將效能波動控制在0.11%以內,其產品力不僅受到金融、運營商、網際網路、雲服務廠商的廣泛青睞,更在今年ODCC上榮獲了綜合效能獎。

資料基礎架構如何演進,西部資料有話說

資料中心架構走向分解式

如果說儲存自上向下的分層是資料管理與應用走向細分化,那麼資料中心架構走向分解式架構就是資料儲存資源加速走向高效共享化。

“接下來資料中心架構層面一個很大的變化就是分解式架構開始興起。”劉鋼如是說。

資料基礎架構如何演進,西部資料有話說

在未來,儲存系統發展將會呈現出一種開放可組合相容的分解式架構,其中作為計算核心的伺服器被分解為DPU、GPU、FPGA、Memory、Flash、Disk、Tape等器件與CPU記憶體的資源組合,這些資源透過虛擬化技術結合場景進行組合,需要的時候對外提供,不需要的時候返還給資源池,從而實現彈性伸縮的效果。

實際上,分解式的架構帶來最為直接的好處就是,使用者並不用擔心底層儲存到底是何種技術組合,而是可以聚焦上層業務創新,根據業務需求特點來選擇不同的組合,實現儲存資源和效率的最大化,以及上層應用的最佳體驗。

當然,分解式架構的興起也必然會讓西部資料這種擁有全面產品線和產品組合的廠商更加如魚得水,西部資料在資料中心已經擁有高容量的企業級硬碟、企業級固態硬碟,以及高密度、高效能的JBOD&JBOF、NVMe-oF新型系統等一系列產品組合,可以為資料中心提供各種最優組合。

資料基礎架構如何演進,西部資料有話說

“西部資料正在加速產品、技術研發的整合,並且會繼續跟市場上系統級的廠商、方案商、軟體公司一起合作,完善產品組合的搭配,讓其滿足不同使用者的需求。”劉鋼補充道。

事實上,資料中心架構走向分散化的趨勢也跟當下新基建的潮流所吻合。眾所周知,新基建將會帶來基礎設施的又一輪革命,5G、人工智慧、大資料、雲端計算等技術在各種業務場景中的應用,不僅會讓舊場景迎來新的智慧化升級,也會迸發出更多新場景的創新,而落實在底層資料中心,對於資料基礎架構的效能、容量、能耗又提出了更高的要求。

“西部資料自身定位是資料基礎架構的領導者,成為新基建的關鍵部件提供商,為新基建提供智慧的‘磚’和‘瓦’,以及規劃資料基礎架構,以滿足上層應用的各種需求。”西部資料公司副總裁兼中國區業務總經理劉鋼最後表示。


來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/69965091/viewspace-2742895/,如需轉載,請註明出處,否則將追究法律責任。

相關文章