不同時期資料如何儲存?浪潮資訊提供全生命週期管理方案
北京 2022年5月17日 /美通社/ -- 隨著雲端計算、大資料等新興應用廣泛普及,業務資料呈現爆炸式增長,海量資料的高效訪問、經濟儲存和智慧管理變得越來越重要。
從資料生命週期來看,在資料剛生成並使用時,屬於線上資料,線上資料訪問的頻率最高,資料的價值也最高,對資料訪問的效能、資料的訪問的連續性、資料邏輯錯誤後的恢復性有很高的要求,但隨著時間的推移,線上熱資料會逐步變成溫資料,甚至冷資料和冰資料;據統計,超過30天的資料的使用率不到10%,但這些資料仍然很重要,如何處理和合理儲存這部分資料,對IT系統的運維部門來講,是一個需要解決的重要問題。
浪潮儲存基於對資料需求特點的研究,發現不同時期的資料存在不同的需求,對於儲存效能、成本的需求差異較大,基於這些特點提出了熱、溫、冷、冰四級分層資料生命週期管理策略,根據資料的訪問頻率不同,提供相應的方案和產品,透過資料分級集中管理,實現儲存效能、容量和成本之間的平衡,提升系統的整體儲存效能的同時,減少裝置投入成本。
熱資料高可用,保障業務永續
MES( 製造執行系統)、HIS(醫院資訊系統)、ERP(企業資源計劃)等結構化資料為主的關鍵業務,對儲存效能、對業務連續性有非常高的要求,浪潮提供基於集中式儲存平臺的免閘道器儲存雙活方案,在雙活模式下,兩個資料中心具備等同的業務處理能力並透過高速鏈路實時同步資料,採用浪潮獨有的WAN網路加速技術,透過先進的演算法實現資料流壓縮、固定塊切割和多資料流併發,將遠端傳輸的效能提升高達10倍、延時降低為原來的十分之一,僅佔用少量的網路頻寬就可以完成海量資料的遠端複製,大幅降低企業對容災網路頻寬的依賴,節約成本。若其中一個資料中心出現故障,業務會立即自動切換到另一資料中心,保持業務連續執行,並且方案不需要單獨閘道器,在降低了延遲的同時,也減少了閘道器帶來的額外故障風險。
在此基礎上,浪潮儲存可以升級至容災更全面的兩地三中心方案,即生產資料中心、同城災備中心、異地災備中心。其中異地災備中心提供資料備份,當同城中心因自然災害等原因而發生故障時,異地災備中心可以用備份資料進行業務的恢復。兩地三中心的設計架構,可在同城雙中心遇自然災害或人為破壞時,使用異地災備中心及時恢復並提供有效的資訊服務,從而保證業務和資料的連續性。
在容災方案中,浪潮集中式儲存平臺能夠提供滿足企業關鍵的業務需求的可靠性和效能。在可靠性方面,浪潮儲存從器部件到儲存作業系統再到演算法進行了全面的加強。在效能方面,透過不斷打磨以iTurbo為核心的加速引擎,最佳化資源排程演算法,充分利用更多的CPU核心和執行緒承載更多的資料儲存程式。透過搭載iTurbo智慧引擎,浪潮集中式儲存在SPC-1效能測試中創造了2300 萬IOPS的世界紀錄。
浪潮成熟的雙活、兩地三中心技術方案已經在金融、醫療等關鍵行業有大量的成功實踐,無論是在實際發生的災難還是災備演練,RPO和RTO均接近於零,有效保障了使用者關鍵業務的連續性。
溫資料備份,確保資料安全
容災方案透過資料多地存放,物理上保障了線上熱資料業務連續,但遇到邏輯問題仍可能面臨風險。比如當前端業務新建一個文件,修改一條資料,刪除一個圖片時,儲存會把最新的狀態儲存下來,資料的歷史狀態一直會被最新的狀態覆蓋。無論是惡意入侵、誤操作,還是正常操作,儲存並不識別上層軟體的意圖。如果是異常操作,則需要專業的備份系統將資料恢復到操作之前的狀態。
浪潮備份解決方案部署備份一體機DP2000G6,單一裝置可提供傳統備份方案中備份軟體、備份伺服器、備份儲存三者的功能,滿足企業D2D及D2D2T備份需求,簡化了用備份系統的建設和維護。浪潮備份方案透過合成多種備份技術,利用上一個全備份以及其後的增量備份生成一個新的備份,兼顧全備和增備的優勢,有效應對需要備份大量檔案的應用場景;並透過重刪和壓縮技術,提高了備份速率,降低了企業擴容成本。
溫資料備份方案可以有效抵禦因人為誤操作、被勒索病毒攻擊、以及自然災害等不可抗拒力而導致的業務中斷和資料丟失所帶來的風險,幫助使用者實現業務永遠線上,資料永不丟失。
冷資料歸檔,低成本儲存有保障
隨著網際網路、人工智慧、大資料等新技術的快速應用,資料採集精確度不斷提升,來源不斷增多,傳輸效率也在快速提升,資料規模爆發式增長,其中80%以上多為圖片、影片等非結構化資料。這些非結構資料在使用一段時間後,會積澱為使用頻率不高的冷資料,但是冷資料並非失去價值,大資料、人工智慧等新興業務對海量冷資料進行檢索和挖掘的需求依然存在而且日益迫切。面對體量巨大但訪問效能要求不高的冷資料,傳統儲存無法滿足海量冷資料的低成本儲存需求。
基於資料儲存成本、容量、效能等方面的權衡考量,浪潮儲存採用分散式儲存對海量 冷資料進行管理,滿足大資料等新興業務對部分 冷資料進行近線或線上訪問的偶發存取效能要求。
浪潮分散式儲存AS13000系列可同時提供檔案、塊、物件、大資料四種儲存服務,實現一套儲存支撐一個資料中心業務,極大地提高資料共享的效率,同時所有裝置統一管理,減少裝置維護和管理成本,降低TCO。此外,隨著業務增長,浪潮分散式儲存不僅可以透過擴充套件節點增加容量及效能資源,還能在所需的儲存型別發生了巨大變化情況下,可以將原有塊儲存的資源進行釋放,配置為檔案儲存空間,從而避免重複投資,幫助企業敏捷地應對海量資料業務複雜的儲存需求。同時為了保障資料的安全,浪潮分散式儲存還基於回收站功能有效防止資料誤刪;並採用資料冗餘策略,支援業界最高的8份副本、4TB/H快速重構進一步提升系統可靠性。
冰資料離線,經濟節能長期儲存
除了企業自身業務的特點對資料有著長期儲存需求之外,在特定的行業,對資料還有明確的監管要求,如醫療行業住院病歷資料需要儲存30年以上;測繪地理資訊業務檔案保管期限最長為永久;教育行業的學生資訊,成績,檔案要求永久儲存。針對於此類資料訪問頻率非常低,但需要保障安全的資料,浪潮儲存採用了模組化的磁帶庫,在保障資料安全的情況下,提供持久經濟的解決方案。
首先,從經濟節能的角度,磁帶採用奈米級磁性顆粒,儲存密度更高,並且一個磁帶驅動器可以對應大量的磁帶,當擴容時,只需考慮儲存介質的成本,同等容量下磁帶儲存的成本僅為磁碟的1/6;磁帶離線儲存記錄下資料後,被存放在自動磁帶庫的卡槽中,不用定期通電維護,節省大量能耗。
其次,在安全可靠層面,磁帶配有內建和動態加密,以及介質自身的性質帶來額外的安全性,如離線狀態隔絕了駭客和網路攻擊,無法訪問或修改資料;根據相關測試表明磁帶出錯率相當於硬碟萬分之一,能保障資料儲存期限長達30-50年。
浪潮冰資料離線解決方案支援最新的LTO9磁帶,單系統最高可提供400多PB資料空間,滿足金融、醫療、檔案、石油勘探等行業的海量重要資料離線長期儲存需求。
資料作為企業重要的數字資產,隨著企業數字化轉型不斷加速,資料安全要求越來越高,資料價值挖掘越來越深,資料全生命週期的管理模式已成為企業在智慧時代下全新的需求。為此,浪潮提出"儲存即平臺"戰略,以面向關鍵應用的集中式儲存平臺、面向智慧應用的分散式儲存平臺、保障資料安全的備份儲存平臺、長週期儲存資料的歸檔儲存平臺四大平臺,針對資料不同週期的效能、容量、成本等需求特點,提供資料全生命週期儲存解決方案,助力企業提速數字化轉型。
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/70004007/viewspace-2894964/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- Elasticsearch索引生命週期管理方案Elasticsearch索引
- 資料全生命週期管理應用平臺的組成
- 元件生命週期管理和通訊方案元件
- 12c ILM資料生命週期管理
- Salesforce 生命週期管理(一)應用生命週期淺談Salesforce
- 北京智和信通:IT資產全生命週期運維監控管理方案運維
- TiPLM---產品全生命週期管理系統
- ElasticSearch-生命週期管理Elasticsearch
- 團隊管理生命週期
- Tomcat生命週期管理Tomcat
- Django ORM 資料庫生命週期DjangoORM資料庫
- 淺談資料庫生命週期資料庫
- 生命週期
- npm scripts的生命週期管理NPM
- 敏捷應用生命週期管理敏捷
- TRY/TRM — 產品全生命週期資料關聯和追溯
- 感知生命週期的資料 -- LiveDataLiveData
- View生命週期與Activity生命週期的關係View
- Flutter - 生命週期監聽和管理Flutter
- Elasticsearch ILM DSL 索引生命週期管理Elasticsearch索引
- 最全面的 Bug 生命週期管理
- PHP 生命週期PHP
- Flutter - 生命週期Flutter
- sessionStorag 生命週期Session
- Fragment生命週期Fragment
- Activity生命週期
- vue - 生命週期Vue
- React生命週期React
- ubuntu生命週期Ubuntu
- React 生命週期React
- vue生命週期Vue
- 惠普應用生命週期管理解決方案--HP ALM 11
- ReactJS 生命週期、資料流與事件ReactJS事件
- 阿里雲資料中臺新品Quick Stock 助力貨品全生命週期管理阿里UI
- [譯]如何使用React生命週期方法React
- akka-typed(1) - actor生命週期管理
- Java實現生命週期管理機制Java
- 專案管理過程之生命週期 (轉)專案管理