迎接數字經濟挑戰,UCloud發力下一代歸檔儲存

danny_2018發表於2020-08-14

5G時代來臨,代表著人們的工作和生活都將走向數字化、智慧化的美好時代。但是,從資料儲存的角度來看,更大的頻寬、更高的速度、更低的延遲,意味著我們要面對更大的資料量,以及更昂貴的儲存成本。如何解決這一挑戰?個別商業嗅覺敏銳的企業,已經率先佈局,打造數字化時代的“儲存基石”!

“冷資料”不冷

前不久,UCloud正式釋出了全新架構的歸檔儲存產品,該產品的最大亮點是,實現了國內首次高密度SMR盤的商用落地,並且儲存單價達到行業最低,價格為0.024元/GB/月。眾所周知,歸檔儲存並不是啥標新立異的產品,大多數雲提供商早就把它作為物件儲存中的一部分,為使用者提供多種型別的儲存服務。包括UCloud,在之前的物件儲存中,也已經提供歸檔儲存服務。那麼,這次的新品推出有哪些戰略意義?UCloud為什麼要花大力氣把歸檔儲存作為產品投入的重點?和之前產品相比,新一代歸檔儲存經歷了怎樣的研發路徑?是如何實現業界效能最佳,達到價格更優目標的?

“在數字經濟高速發展的背後,大資料的最終走向一定會變為冷資料,所以歸檔儲存一定是解決5G時代大資料儲存問題的突破口,這也是UCloud為什麼要佈局下一代歸檔儲存產品的最根本原因。” UCloud儲存平臺研發總監 吳斌煒,具體介紹了產品研發背後的故事。

▲UCloud儲存平臺研發總監 吳斌煒

在大資料儲存過程中,使用者面臨的最大挑戰就是非結構化資料儲存,包括圖片、文字、音影片資料等,這些資料最好的承載方式就是物件儲存。所以,物件儲存幾乎成為每家雲廠商的“標配”,使用範圍的廣闊程度不次於“計算”。物件儲存大多是指“熱儲存”,但是會把資料進行分層,一些低頻資料會放到歸檔儲存裡面。所以,儘管我們平常很少聽到“歸檔儲存”這一概念,但是它在大資料儲存中的重要地位,不言而喻。

主推歸檔儲存,唯有用最好的技術、最前沿的應用,才能在提升效能的同時,降低使用者的使用成本。之前,UCloud的客戶群體大多是偏公有云的網際網路企業。對於一些偏行業的傳統企業,UCloud會提供兩種方案。一種是類似於醫療、金融等更重視資料安全和私密性的企業,會提供私有云解決方案。另一種是對速度有要求的使用者,這些企業主要使用藍光、磁帶等,會提供公有云解決方案。但是,原來的價格並未全面打動使用者,藍光和磁帶的成本也非常低,使用者上雲的動力不足。

企業數字化轉型步伐加快後,國家會逐步放開政策,金融、醫療等傳統行業,也希望藉助公有云去解決成本問題,實現資源共享。當然,有些企業也會透過所謂的專有云解決方案,來實現降本增效的目標。什麼是專有云呢?就是整個機房搭建甚至運維都由雲廠商來實現,只不過資源是完全獨立狀態,屬於使用者獨有。不管是公有云、私有云還是專有云,資料儲存都是最關鍵一環,尤其像廣電、電商直播、基因測算等大資料應用場景,傳統的歸檔儲存已經無法滿足使用者需求。

全新架構突破成本極限

如何解決使用者不斷攀升的“冷資料”儲存壓力?儲存成本包括運營成本、硬體成本,而硬體成本又包括儲存和記憶體。要想從整體上降低儲存成本,一定要進行全盤最佳化,做軟、硬體一體化的設計。從硬體成本來看,國內大多數廠商採用都是CMR盤,也就是瓦疊磁軌技術沒有出現前的傳統的PMR磁碟。CMR盤的優勢是效能較高,相鄰磁軌之間沒有干擾,隨便寫;但是寫磁頭太寬導致磁軌資源浪費。另外,磁碟的壽命和讀寫次數有關,單次改寫、讀寫次數太多,導致磁碟壽命大打折扣。所以,SMR瓦楞式堆疊機械磁碟成為PMR垂直式記錄磁碟的又一重要分支,全面解決了傳統磁碟的弊端。為了解決磁軌之間互干擾的現象,很多企業把磁軌像瓦片一樣一層一層堆起來。

▲UCloud儲存平臺資深研發工程師 方然

“UCloud原本是一家純軟體廠商,想象中的高密度儲存,無非是把機架一層層加高。但是最後,神奇的事情發生了。因為硬碟太重,導致地板承重不夠。” UCloud儲存平臺資深研發工程師 方然,補充說道。

新一代歸檔儲存並不是靠簡單的硬體疊加就能投入生產環境,如果在重裝置情況下,把捷豹的設計放在機櫃的上面就會很危險,抽離的時候容易出現問題。為了降低硬體成本,UCloud新一代歸檔儲存在國內首次採用了西部資料的高密JBOD機型和SMR盤,並首次利用自研儲存架構實現該技術落地。SMR磁碟的磁軌是按Zone呈現的疊瓦式分佈,這種分佈帶來的好處是可以更高密度的儲存資料。與原來36盤傳統機型相比,採用高密機型SMR盤後,單位機架的儲存容量提升5.375倍,磁碟數量增加59%,並且單塊磁碟儲存空間提升150%,客戶成本能直線下降。對比CMR,能實現10-20%的成本下降,如果未來使用20T的SMR,成本能下降到20%-30%。當然,如果使用者對效能有要求,UCloud最新歸檔儲存也能快速遷回到CMR盤,該產品可以全面相容SMR、CMR盤、雙活高可用、支援上下電的IO排程、EC的靈活配置和磁碟故障自動化發現。

UCloud新一代歸檔儲存,之所以能打敗諸多友商產品,在可靠性方面用了真功夫。為了確保應用效能,該產品實現了儲存節點雙機頭可見功能,即使發生故障,也快速自動切換。新一代歸檔儲存還實現了全鏈路的CRC校驗,來全面保障使用者資料的安全性。

除了降低硬體成本,UCloud的軟、硬體協同模式,也能降低運營成本。UCloud新一代歸檔儲存在軟體層面上自主研發了一套磁碟上下電排程系統,可以保障磁碟的壽命的同時,極大降低電費成本,使磁碟能耗降低近90%, 在純寫入場景下,耗能磁碟塊數為原有的5%。另外,透過硬體加速,使得EC計算相較於傳統的純軟體計算,提升了4~5倍吞吐。這對有著特殊業務需求的行業來說,比如:多媒體資料歸檔、歷史資料合規性歸檔、大資料/AI分析資料歸檔等,無疑帶來了關鍵業務能力。

可以說,UCloud新一代歸檔儲存,不是一個普通意義上的產品釋出,而是冷資料“熱”時代的全新開啟。尤其在5G大資料場景下,與UCloud攜手並行,是一個能夠引領未來的選擇。

來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/31547898/viewspace-2711656/,如需轉載,請註明出處,否則將追究法律責任。

相關文章