駛向智慧海洋深處,華為儲存的無盡想象

naojiti發表於2020-06-01

1519年9月20日,葡萄牙航海家麥哲倫率領探險隊經直布羅陀海峽,開始環球航行。

一年多以後,他們穿越了一個狂風巨浪、險灘暗礁的海峽,來到了一片茫茫無際的大洋。在其中航行了三個月,從南美洲越過關島,抵達菲律賓群島,始終沒有遇到一次大的風浪。這群世界上第一批全球航行的隊員,將這片安全的海域稱之為“太平洋”。

可以說,太平洋具備了海洋最高階的一切特徵——深邃、寬廣、巨大。在科技的語境中,它和今天新基建環境下的資料洪流如出一轍。

既然海洋並不是在任何時候都平靜美麗,地震、海嘯、颱風……自然之力曾無數次向人類宣示它的瘋狂。那麼,憑什麼我們會認為海量資料的暴漲也會乖乖被人類所蟄伏呢?

雲端計算、大資料、人工智慧等新一代資訊科技的產業化,讓資料以前所未有的爆炸式增長,奔湧到各行各業面前,需要更強大的基礎設施來應對海量資料。

(華為重磅釋出OceanStor儲存Pacific系列)

最近,華為釋出的OceanStor儲存 Pacific系列,就針對最壯闊、也最險峻的海量資料場景,揚起了迎擊驚濤的風帆。這意味著,資料儲存不再是一件“看天吃飯”的事,正在被人力一點一滴地擺渡至彼岸。

靜謐中醞釀驚濤:儲存海量資料的產業暗湧

如果我們用誠實而謙遜的視角來審視即將到來的智慧時代,會發現海量資料正如同季風一樣,既帶來了充沛的智慧雨水,也埋藏著不穩定的因素。

簡單總結一下的話,儲存海量智慧資料的海域中,可能導致哪些自然災害:

首先,暴漲的洪流。5G、AI、IoT等的廣泛應用,讓現在各行各業對資料儲存的量級需求越來越大,資料如海浪般席捲而來,不僅讓機房和資料中心的儲存成本日漸上升,而且在傳統的伺服器支撐下,已經出現了部分硬性資料儲存不下的現實問題。

比如1小時8K超高清視訊佔用的儲存空間,是1080P高清視訊的40倍以上;5G讓工業互聯、遠端診療、自動駕駛成真的同時,也給運營商帶來了10倍以上資料增長壓力;基因測序的商業化普及,日產出的資料高達6TB。

如果這些資料都無法被儲存,或是迫於空間成本有限而限期刪除,那麼對其的挖掘、訓練、利用自然也成了無水之源、無本之末。而調查顯示,由於傳統儲存系統架構與成本的限制,當前企業資料僅有不到2%被儲存。

如何將爆發式增長的資料以高價效比儲存、妥帖挖掘,就成了儲存行業的新任務。

其次,異構的暗礁。

智慧時代的多場景複雜部署,資料庫面臨的分散式架構挑戰,資料的異構性正在衝擊儲存的極限。

有的資料被儲存在不同結構的計算硬體中,大型機、小型機、工作站、PC、手機、感測器等等,一切皆有可能。資料的格式也在增多,從傳統的資料庫、二維資料,逐漸擴充套件到語音、影像、視訊等等新型多結構資料,還可能被分別儲存在世界各地的不同地點……調查顯示,到2025年180ZB規模的資料中,有95%是非結構化的資料,它們以分散的、不完整、不規則的形式,被接入到資料平臺中。

比如智慧城市的建設過程中,就既有來自登記資訊、地理資訊系統這樣的結構化資料,也有感測器檢測這樣來源多樣的資料,以及行為描述等難以被記錄的資料。想要對異構資料進行交換和共享,也對當下網際網路儲存系統提出了新的挑戰。

最後,產業板塊的地震帶。

太平洋是離我們最親近的海洋,而環抱著它的板塊擠壓地帶,也成為地球上最不穩定的部分。圍繞千行萬業的基座——資料儲存,在託舉起產業智慧的時候,也可能引發行業的地震。

一方面,資料的暴漲帶來儲存瓶頸,會直接引發全社會對資料空間的爭奪,儲存成本的上漲與數字化不可逆轉的潮流相摩擦,將使不少行業面臨困局;

另外,資料儲存的本質意義是為了更高效地處理、分析、利用,所以資料儲存行業不僅要將區域性分散的資料建立起全域性、統一的邏輯能力,解決資料的分片機制;還要讓資料管理使能社會經營業務流程,打破不同儲存協議之間的孤島,讓海量資料得以在整個計算海域內自由可靠地奔湧、流轉、共享,轉化成新的產業競爭力。

如果說,麥哲倫一行憑藉幸運,恰好遇上了這片海域最風平浪靜的時刻,那麼產業數字化的席捲,可能需要多一點審慎的思考,思考如何征服資料儲存這片疆域,讓萬物智慧驅動風帆駛向更遠處。

鍛造儲存巨輪:華為OceanStor儲存Pacific系列的渡海之旅

既然作為數字海洋基座的資料,驅動著智慧技術使能全社會的轉型升級。深耕智慧基建的華為,自然不會缺席。

華為最新一代OceanStor儲存Pacific系列,就是幫助產業者安全橫渡資料海洋所打造的一艘現代化巨輪。在三個核心部件,鍛造出了全新的價值想象:

一是技術的桅杆。

資料的多源異構、應用場景的廣泛覆蓋、跨硬體的架構難題,是產業應用資料、冶煉智慧、賦能業務的核心阻礙。所以在華為 OceanStor儲存Pacific系列中,華為就用前沿的技術矩陣打造了一個創新的桅杆,成為數字航海強有力的支撐。

首先,華為OceanStor儲存此次推出的全新一代Pacific系列,就針對海量資料場景,打造了專用硬體高密大容量儲存,可以在5U空間裡支援120塊硬碟,密度達到業界通用儲存型伺服器的2.67倍,空間節省62.5%;

除了硬體之外,華為還結合多協議融合互通、高效縮減演算法、多級可靠機制等軟體創新,將硬體的能力充分調動起來,提供了傳統伺服器所無法承載的能力。比如依託系列化硬體,以分散式超容量擴充套件為主體,結合下一代彈性EC演算法、多協議無損互通等,可以讓儲存資源在面對AI、HPC、視訊等不同高併發資料資料時,提供更可靠的解決方案。與業界開源系相比,可以達到93%的有效利用率。

軟硬體的協同作用,讓華為OceanStor儲存Pacific系列的桅杆,既堅固可靠,又柔韌有彈性,同時滿足海量儲存與不同場景部署的訴求,也成為業界技術變革的風向標。

二是高效的發動機。

資料儲存就如同航母的發動機,怕它不動,又怕它亂動。既不能停擺,又需要足夠的能效來保障船隻行駛的更遠,因此,華為率先推出可得容量的商業模式,基於領先的資料冗餘保護和縮減技術,幫助使用者降低海量儲存的採購和使用門檻。

在效能和可靠性不降低的前提下,內部vNode技術可讓磁碟利用率達到93%,相比業界平均水平領先40%以上。熱、溫、冷資料按需自動分級到快閃記憶體、磁碟和藍光介質,資料自由流動無需人工干預,進一步降低運維成本。

而通過業界首個檔案、大資料、物件協議無損互通,華為OceanStor儲存Pacific系列解決了傳統閘道器方式的效能和語義損失問題,讓一套儲存可以支撐多個業務環節的資料處理,直接幫助客戶節省空間。

這些效率效能上的加持,打破了資料儲存的服務邊界,讓更多行業可以大膽擁抱資料基礎設施,向智慧時代全速前進。

三是產業的船錨。

正如前面所說,華為OceanStor儲存Pacific系列的誕生,是華為智慧計算戰略佈局下,海量資料儲存與產業數字化之間的重要通道。因此,與行業場景聯動的能力也就至關重要。

目前看來,華為OceanStor儲存Pacific系列產品並不侷限於當一個沒有感情的資料容器,而是通過眾多技術手段來幫助企業釋放資料價值,反哺數字化轉型。

比如推出的資料管理系統DMS,就打破了華為儲存系統和第三方架構的藩籬,將幾種協議資料面融合互通,讓企業資料的平臺化應用更簡單,擺脫資料孤島的困境。整體架構的設計也不斷不斷進行調優和變化,部分分散式場景還支援虛擬化和雲平臺的場景應用……

通過這些手段,充分滿足海量資料場景不同的儲存需求,簡化資料應用的門檻,把資料的利用價值提升到最大限度。

因此,儲存得以由單一硬體向資料產業進化,融入到整個新基建浪潮的時代洪流機遇之中。

萬物智慧的海洋深處,華為儲存的無盡想象

華為OceanStor儲存Pacific系列的推出,除了推動社會數字化大航海,也帶動了儲存市場自身進入了升級序列。這也引發了我們的好奇,華為儲存是如何在數年間,突破層層技術難關與產業高地,走到引領行業蝶變,實現價值自證的極限?

太平洋上,曾經爆發過不少知名的戰爭。而華為在資料儲存市場的航海,背後的戰略部署在無形中也與海域作戰不謀而合。或許我們可以從三場戰役,來理解華為深入儲存賽道的核心戰力。

第一戰:車輪行動。

在一場針對洛斯內格羅斯島的空襲戰鬥中,面對敵人佔據優勢的戰況,麥克阿瑟選擇了開啟一場,要求偵察部隊“迅速打擊,出奇制勝”。也就是著名的車輪行動,即如果沒有不必要的傷亡,就繼續前進,佔領附近的機場,並迅速予以增援。經過一週的戰鬥,最終憑藉車輪行動徹底贏得了戰鬥。

這與華為整個儲存產品的成長史異曲同工。可以說華為儲存的發展程式,就是不斷攻佔儲存的技術高地,幫助客戶解決問題,進而實現自我價值。

比如2014年,華為率先提出了融合儲存的概念,把儲存、備份等五個大點進行融合,引發了市場跟風效應。也是在此時,華為儲存一躍成為國內市場的排行第一。

再比如海量儲存的需求,自2009年首次釋出第一代檔案儲存以來,華為持續投入海量資料儲存領域。2019年華為就釋出了 OceanStor儲存Pacific系列的前身,與勘探、金融、基因測序、運營商等開始共同構築場景案例。而華為OceanStor儲存Pacific系列更是集結了華為在儲存軟、硬體方面的多年積累。

在此基礎上,華為還砸探索新的儲存系統能力,比如嘗試打造顆粒級、核心級可靠性,進一步優化記憶體與CPU之間的互聯互通……基於基礎能力、不間斷的技術迭代,也讓華為儲存得以在“新基建”的機遇關頭,成為數字化的產業基石。

2.冰山行動。

在沖繩島上,曾經爆發過太平洋戰場中規模最大的兩棲登陸行動。航空轟炸+地面登陸,最終為二戰勝利奠定了基礎。

而在華為儲存的戰略中,我們也看到了對軟體與硬體的協同作戰,發揮到了極致。

前面我們提到,華為OceanStor儲存Pacific系列的高密度硬體+多個軟體創新,引領了整個儲存產業的航向標。

實際上,早在2008年,華為就開始探索軟硬體協同的儲存系統方案。當時,華為將底盤和控制器的軟體結合起來,通過盤庫配合把效能方面做到極致。

2015年,華為又推出了雙活解決方案,把華為儲存能力和華為DWDM能力進行融合,在醫院、金融、運營商的系統中得到了廣泛應用。

在軟體定義的時代,華為也堅持保留自己硬體定義的能力。這與很多儲存的SDS廠商不同,但在今天海量資料的極限場景下,卻藉由華為 OceanStor儲存Pacific系列展現出了硬體工藝與軟體演算法所能達到的新高度。

3.攻佔硫磺島。

“一島定乾坤”的故事,沒少在太平洋中上演,比如著名的中途島,以及少有人知的硫磺島。敵方頑強堅守的硫磺島,最終憑藉浴血奮戰,得以成為開啟本土戰場的重要通道。

而在儲存領域裡, AI是行業迭代的主旋律,也是華為所必須拿下的硫磺島。

所以在OceanStor智慧分散式儲存系統中,“Storage for AI”(為AI而存)和“AI in Storage”(儲存智慧)就成為整個戰略部署的主線。

像在華為OceanStor儲存Pacific系列中,就將AI融入儲存全生命週期管理。比如利用AI演算法的能力,加上智慧儲存管理系統,以及整個華為雲的智慧能力,將軟、硬、雲三個AI有機體結合在一起,對不同的負載場景進行反覆學習,不斷提高儲存效率和資源利用率,從而管理上儘可能減少人工操作,避免人為故障。

值得一提的是,這些AI模型還會在華為自己的業務流程和IT系統中進行實踐,確保演算法模型成熟度之後,在華為OceanStor儲存Dorado系列、Pacific系列等不同系列裡面進行推廣和使用,保障整體的可靠性。

而為了讓AI應用平臺能夠更好地作業,華為儲存的Storage for AI也努力發揮最大效益,在自動駕駛、環境監測、智慧交通等複雜的海量資料場景中,通過協議的互通,在管理面還是資料面進行打通,減少了資料的搬遷,可以直接縮短演算法的訓練成型時間,讓萬物智慧距離現實更進一步。

我們常說資料是智慧時代的“石油”,它的採集、儲存、運輸、冶煉、使用等等,整合在一起決定了新的生產力能效。

正如華為資料儲存與機器視覺產品線總裁周躍峰所說,海量資料在企業數字化轉型中扮演著越來越重要的角色,然而當前只有2%的資料被儲存、儲存下來的資料只有10%得到分析利用。

儲存看起來只是一件小事,卻決定著資料能不能被安全、有效、低成本地抵達產業中樞,轉化為服務千行萬業的燃料。

華為儲存的探索,或許可以幫我們在沉沉海霧之中,踏實地航行在智慧時代的無限路途。

來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/31561483/viewspace-2695551/,如需轉載,請註明出處,否則將追究法律責任。

相關文章