駛向智慧海洋深處,華為儲存的無盡想象
1519年9月20日,葡萄牙航海家麥哲倫率領探險隊經直布羅陀海峽,開始環球航行。
一年多以後,他們穿越了一個狂風巨浪、險灘暗礁的海峽,來到了一片茫茫無際的大洋。在其中航行了三個月,從南美洲越過關島,抵達菲律賓群島,始終沒有遇到一次大的風浪。這群世界上第一批全球航行的隊員,將這片安全的海域稱之為“太平洋”。
可以說,太平洋具備了海洋最高階的一切特徵——深邃、寬廣、巨大。在科技的語境中,它和今天新基建環境下的資料洪流如出一轍。
既然海洋並不是在任何時候都平靜美麗,地震、海嘯、颱風……自然之力曾無數次向人類宣示它的瘋狂。那麼,憑什麼我們會認為海量資料的暴漲也會乖乖被人類所蟄伏呢?
雲端計算、大資料、人工智慧等新一代資訊科技的產業化,讓資料以前所未有的爆炸式增長,奔湧到各行各業面前,需要更強大的基礎設施來應對海量資料。
(華為重磅釋出OceanStor儲存Pacific系列)
最近,華為釋出的OceanStor儲存 Pacific系列,就針對最壯闊、也最險峻的海量資料場景,揚起了迎擊驚濤的風帆。這意味著,資料儲存不再是一件“看天吃飯”的事,正在被人力一點一滴地擺渡至彼岸。
靜謐中醞釀驚濤:儲存海量資料的產業暗湧
如果我們用誠實而謙遜的視角來審視即將到來的智慧時代,會發現海量資料正如同季風一樣,既帶來了充沛的智慧雨水,也埋藏著不穩定的因素。
簡單總結一下的話,儲存海量智慧資料的海域中,可能導致哪些自然災害:
首先,暴漲的洪流。5G、AI、IoT等的廣泛應用,讓現在各行各業對資料儲存的量級需求越來越大,資料如海浪般席捲而來,不僅讓機房和資料中心的儲存成本日漸上升,而且在傳統的伺服器支撐下,已經出現了部分硬性資料儲存不下的現實問題。
比如1小時8K超高畫質影片佔用的儲存空間,是1080P高畫質影片的40倍以上;5G讓工業互聯、遠端診療、自動駕駛成真的同時,也給運營商帶來了10倍以上資料增長壓力;基因測序的商業化普及,日產出的資料高達6TB。
如果這些資料都無法被儲存,或是迫於空間成本有限而限期刪除,那麼對其的挖掘、訓練、利用自然也成了無水之源、無本之末。而調查顯示,由於傳統儲存系統架構與成本的限制,當前企業資料僅有不到2%被儲存。
如何將爆發式增長的資料以高價效比儲存、妥帖挖掘,就成了儲存行業的新任務。
其次,異構的暗礁。
智慧時代的多場景複雜部署,資料庫面臨的分散式架構挑戰,資料的異構性正在衝擊儲存的極限。
有的資料被儲存在不同結構的計算硬體中,大型機、小型機、工作站、PC、手機、感測器等等,一切皆有可能。資料的格式也在增多,從傳統的資料庫、二維資料,逐漸擴充套件到語音、影像、影片等等新型多結構資料,還可能被分別儲存在世界各地的不同地點……調查顯示,到2025年180ZB規模的資料中,有95%是非結構化的資料,它們以分散的、不完整、不規則的形式,被接入到資料平臺中。
比如智慧城市的建設過程中,就既有來自登記資訊、地理資訊系統這樣的結構化資料,也有感測器檢測這樣來源多樣的資料,以及行為描述等難以被記錄的資料。想要對異構資料進行交換和共享,也對當下網際網路儲存系統提出了新的挑戰。
最後,產業板塊的地震帶。
太平洋是離我們最親近的海洋,而環抱著它的板塊擠壓地帶,也成為地球上最不穩定的部分。圍繞千行萬業的基座——資料儲存,在託舉起產業智慧的時候,也可能引發行業的地震。
一方面,資料的暴漲帶來儲存瓶頸,會直接引發全社會對資料空間的爭奪,儲存成本的上漲與數字化不可逆轉的潮流相摩擦,將使不少行業面臨困局;
另外,資料儲存的本質意義是為了更高效地處理、分析、利用,所以資料儲存行業不僅要將區域性分散的資料建立起全域性、統一的邏輯能力,解決資料的分片機制;還要讓資料管理使能社會經營業務流程,打破不同儲存協議之間的孤島,讓海量資料得以在整個計算海域內自由可靠地奔湧、流轉、共享,轉化成新的產業競爭力。
如果說,麥哲倫一行憑藉幸運,恰好遇上了這片海域最風平浪靜的時刻,那麼產業數字化的席捲,可能需要多一點審慎的思考,思考如何征服資料儲存這片疆域,讓萬物智慧驅動風帆駛向更遠處。
鍛造儲存巨輪:華為OceanStor儲存Pacific系列的渡海之旅
既然作為數字海洋基座的資料,驅動著智慧技術使能全社會的轉型升級。深耕智慧基建的華為,自然不會缺席。
華為最新一代OceanStor儲存Pacific系列,就是幫助產業者安全橫渡資料海洋所打造的一艘現代化巨輪。在三個核心部件,鍛造出了全新的價值想象:
一是技術的桅杆。
資料的多源異構、應用場景的廣泛覆蓋、跨硬體的架構難題,是產業應用資料、冶煉智慧、賦能業務的核心阻礙。所以在華為 OceanStor儲存Pacific系列中,華為就用前沿的技術矩陣打造了一個創新的桅杆,成為數字航海強有力的支撐。
首先,華為OceanStor儲存此次推出的全新一代Pacific系列,就針對海量資料場景,打造了專用硬體高密大容量儲存,可以在5U空間裡支援120塊硬碟,密度達到業界通用儲存型伺服器的2.67倍,空間節省62.5%;
除了硬體之外,華為還結合多協議融合互通、高效縮減演算法、多級可靠機制等軟體創新,將硬體的能力充分調動起來,提供了傳統伺服器所無法承載的能力。比如依託系列化硬體,以分散式超容量擴充套件為主體,結合下一代彈性EC演算法、多協議無損互通等,可以讓儲存資源在面對AI、HPC、影片等不同高併發資料資料時,提供更可靠的解決方案。與業界開源系相比,可以達到93%的有效利用率。
軟硬體的協同作用,讓華為OceanStor儲存Pacific系列的桅杆,既堅固可靠,又柔韌有彈性,同時滿足海量儲存與不同場景部署的訴求,也成為業界技術變革的風向標。
二是高效的發動機。
資料儲存就如同航母的發動機,怕它不動,又怕它亂動。既不能停擺,又需要足夠的能效來保障船隻行駛的更遠,因此,華為率先推出可得容量的商業模式,基於領先的資料冗餘保護和縮減技術,幫助使用者降低海量儲存的採購和使用門檻。
在效能和可靠性不降低的前提下,內部vNode技術可讓磁碟利用率達到93%,相比業界平均水平領先40%以上。熱、溫、冷資料按需自動分級到快閃記憶體、磁碟和藍光介質,資料自由流動無需人工干預,進一步降低運維成本。
而透過業界首個檔案、大資料、物件協議無損互通,華為OceanStor儲存Pacific系列解決了傳統閘道器方式的效能和語義損失問題,讓一套儲存可以支撐多個業務環節的資料處理,直接幫助客戶節省空間。
這些效率效能上的加持,打破了資料儲存的服務邊界,讓更多行業可以大膽擁抱資料基礎設施,向智慧時代全速前進。
三是產業的船錨。
正如前面所說,華為OceanStor儲存Pacific系列的誕生,是華為智慧計算戰略佈局下,海量資料儲存與產業數字化之間的重要通道。因此,與行業場景聯動的能力也就至關重要。
目前看來,華為OceanStor儲存Pacific系列產品並不侷限於當一個沒有感情的資料容器,而是透過眾多技術手段來幫助企業釋放資料價值,反哺數字化轉型。
比如推出的資料管理系統DMS,就打破了華為儲存系統和第三方架構的藩籬,將幾種協議資料面融合互通,讓企業資料的平臺化應用更簡單,擺脫資料孤島的困境。整體架構的設計也不斷不斷進行調優和變化,部分分散式場景還支援虛擬化和雲平臺的場景應用……
透過這些手段,充分滿足海量資料場景不同的儲存需求,簡化資料應用的門檻,把資料的利用價值提升到最大限度。
因此,儲存得以由單一硬體向資料產業進化,融入到整個新基建浪潮的時代洪流機遇之中。
萬物智慧的海洋深處,華為儲存的無盡想象
華為OceanStor儲存Pacific系列的推出,除了推動社會數字化大航海,也帶動了儲存市場自身進入了升級序列。這也引發了我們的好奇,華為儲存是如何在數年間,突破層層技術難關與產業高地,走到引領行業蝶變,實現價值自證的極限?
太平洋上,曾經爆發過不少知名的戰爭。而華為在資料儲存市場的航海,背後的戰略部署在無形中也與海域作戰不謀而合。或許我們可以從三場戰役,來理解華為深入儲存賽道的核心戰力。
第一戰:車輪行動。
在一場針對洛斯內格羅斯島的空襲戰鬥中,面對敵人佔據優勢的戰況,麥克阿瑟選擇了開啟一場,要求偵察部隊“迅速打擊,出奇制勝”。也就是著名的車輪行動,即如果沒有不必要的傷亡,就繼續前進,佔領附近的機場,並迅速予以增援。經過一週的戰鬥,最終憑藉車輪行動徹底贏得了戰鬥。
這與華為整個儲存產品的成長史異曲同工。可以說華為儲存的發展程式,就是不斷攻佔儲存的技術高地,幫助客戶解決問題,進而實現自我價值。
比如2014年,華為率先提出了融合儲存的概念,把儲存、備份等五個大點進行融合,引發了市場跟風效應。也是在此時,華為儲存一躍成為國內市場的排行第一。
再比如海量儲存的需求,自2009年首次釋出第一代檔案儲存以來,華為持續投入海量資料儲存領域。2019年華為就釋出了 OceanStor儲存Pacific系列的前身,與勘探、金融、基因測序、運營商等開始共同構築場景案例。而華為OceanStor儲存Pacific系列更是集結了華為在儲存軟、硬體方面的多年積累。
在此基礎上,華為還砸探索新的儲存系統能力,比如嘗試打造顆粒級、核心級可靠性,進一步最佳化記憶體與CPU之間的互聯互通……基於基礎能力、不間斷的技術迭代,也讓華為儲存得以在“新基建”的機遇關頭,成為數字化的產業基石。
2.冰山行動。
在沖繩島上,曾經爆發過太平洋戰場中規模最大的兩棲登陸行動。航空轟炸+地面登陸,最終為二戰勝利奠定了基礎。
而在華為儲存的戰略中,我們也看到了對軟體與硬體的協同作戰,發揮到了極致。
前面我們提到,華為OceanStor儲存Pacific系列的高密度硬體+多個軟體創新,引領了整個儲存產業的航向標。
實際上,早在2008年,華為就開始探索軟硬體協同的儲存系統方案。當時,華為將底盤和控制器的軟體結合起來,透過盤庫配合把效能方面做到極致。
2015年,華為又推出了雙活解決方案,把華為儲存能力和華為DWDM能力進行融合,在醫院、金融、運營商的系統中得到了廣泛應用。
在軟體定義的時代,華為也堅持保留自己硬體定義的能力。這與很多儲存的SDS廠商不同,但在今天海量資料的極限場景下,卻藉由華為 OceanStor儲存Pacific系列展現出了硬體工藝與軟體演算法所能達到的新高度。
3.攻佔硫磺島。
“一島定乾坤”的故事,沒少在太平洋中上演,比如著名的中途島,以及少有人知的硫磺島。敵方頑強堅守的硫磺島,最終憑藉浴血奮戰,得以成為開啟本土戰場的重要通道。
而在儲存領域裡, AI是行業迭代的主旋律,也是華為所必須拿下的硫磺島。
所以在OceanStor智慧分散式儲存系統中,“Storage for AI”(為AI而存)和“AI in Storage”(儲存智慧)就成為整個戰略部署的主線。
像在華為OceanStor儲存Pacific系列中,就將AI融入儲存全生命週期管理。比如利用AI演算法的能力,加上智慧儲存管理系統,以及整個華為雲的智慧能力,將軟、硬、雲三個AI有機體結合在一起,對不同的負載場景進行反覆學習,不斷提高儲存效率和資源利用率,從而管理上儘可能減少人工操作,避免人為故障。
值得一提的是,這些AI模型還會在華為自己的業務流程和IT系統中進行實踐,確保演算法模型成熟度之後,在華為OceanStor儲存Dorado系列、Pacific系列等不同系列裡面進行推廣和使用,保障整體的可靠性。
而為了讓AI應用平臺能夠更好地作業,華為儲存的Storage for AI也努力發揮最大效益,在自動駕駛、環境監測、智慧交通等複雜的海量資料場景中,透過協議的互通,在管理面還是資料面進行打通,減少了資料的搬遷,可以直接縮短演算法的訓練成型時間,讓萬物智慧距離現實更進一步。
我們常說資料是智慧時代的“石油”,它的採集、儲存、運輸、冶煉、使用等等,整合在一起決定了新的生產力能效。
正如華為資料儲存與機器視覺產品線總裁周躍峰所說,海量資料在企業數字化轉型中扮演著越來越重要的角色,然而當前只有2%的資料被儲存、儲存下來的資料只有10%得到分析利用。
儲存看起來只是一件小事,卻決定著資料能不能被安全、有效、低成本地抵達產業中樞,轉化為服務千行萬業的燃料。
華為儲存的探索,或許可以幫我們在沉沉海霧之中,踏實地航行在智慧時代的無限路途。
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/31561483/viewspace-2695551/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- 想象一個人工智慧無處不在的世界人工智慧
- 華為的“少年天才”攀登者,出發向智慧儲存的“奧林帕斯山”
- 杉巖海量智慧儲存加速探秘海洋,感知藍色星球之美
- 華為儲存多路徑
- 華為伺服器和華為儲存伺服器
- 金山雲飄向產業深處產業
- 鯤鵬與天宮:從航空城駛向智慧時代的萬千星辰
- 駛向數字智慧的瀚海,“懂行人”助力石油人乘風破浪
- 從sybase的儲存過程轉向oracle的儲存過程儲存過程Oracle
- 【故障公告】redis記憶體耗盡造成部落格後臺無法儲存Redis記憶體
- PostgreSQL儲存智慧-空間聚集儲存SQL
- 駛向智慧時代的星辰大海,百度AI這一年AI
- 華為雲OBS物件儲存服務:值得擁有的貼心的儲存管家物件
- 突破邊界,華為儲存的破壁之旅
- Science Advances:研究顯示海洋吸收的熱量比以前想象的要多
- 美國限制AI軟體出口!BAT提前佈局,“無人車”駛向何方?AIBAT
- 用你的策略活下去吧,在這無盡的深淵裡 -- Switch Hook #AndroidHookAndroid
- 華為雲物件儲存OBS,助力企業高效解決儲存問題物件
- 使用儲存過程(PL/SQL)向資料庫中儲存BLOB物件儲存過程SQL資料庫物件
- 華為雲學院乾貨:物件儲存服務:便捷管理儲存資源物件
- 華為雲的AI深潛之旅AI
- 圖片處理能力提升50%,杉巖智慧儲存是如何做到的?
- 騰訊雲物件儲存COS新品釋出——智慧分層儲存,自動優化您的儲存成本物件優化
- 浪潮儲存基於智慧運維技術,加速儲存自治運維
- 只剩兩個月,俄羅斯資料儲存將耗盡
- 日期和時間的儲存與處理
- 物件儲存服務的影像處理特性物件
- 快速整合華為AGC雲端儲存服務-AndroidGCAndroid
- Cocos|快速整合華為AGC雲端儲存服務GC
- SAP WM 有無儲存WM Level歷史庫存的Table?
- 聚焦4000億藍海,人工智慧如何走深向實?人工智慧
- 華為雲物件儲存服務OBS教你一招輕鬆解決儲存難題物件
- JuiceFS 在多雲端儲存架構中的應用 | 深勢科技分享UI架構
- 超詳盡!Linux雲伺服器儲存擴容實操Linux伺服器
- USB儲存裝置無法識別的原因
- 無盤中使用者資料的儲存
- MySQL儲存過程的異常處理方法MySql儲存過程
- Matlab | 儲存影像無白色邊框。Matlab