深耕物件儲存 ECS釋放海量非結構化資料新價值

陶然陶然發表於2021-04-14

  在金融科技的浪潮下,銀行作為整個金融行業價值鏈的核心環節,轉型與變革已成為大勢所趨。特別是過去幾年隨著手機銀行業務不斷擴充,非結構化資料也迎來了爆發式增長,這些資料在為銀行發展提供強大驅動力的同時,也給資料的長期儲存管理與使用帶來了更大的挑戰。

  以某大型商業銀行為例,其主要使用物件儲存服務手機銀行,隨著手機銀行新應用需要大量頻繁迭代,傳統的應用開發部署做法已經不能滿足要求,因此,該銀行逐步把手機銀行業務轉移到雲原生業務,採用一個大平臺,併為應用靈活地分配資源,取得了相當的成功。

   這個平臺就是——戴爾易安信ECS物件儲存。據瞭解,該銀行在ECS上已經部署了200多個應用,其中有一個季度上線了50個應用,目前該銀行的物件數量已經超過100億,每天請求量在2億左右,成為國內大型商業銀行雲原生應用的成功實踐。

  筆者認為,該銀行基於戴爾易安信ECS物件儲存技術實現海量非結構化資料的管理實踐,正是行業客戶高度認可戴爾科技集團在物件儲存領域實力的重要縮影。近日,戴爾科技集團大中華區非結構化資料儲存事業部技術總監胡淵汶向我們分享了ECS的最新進展。

戴爾科技集團大中華區非結構化資料儲存事業部技術總監 胡淵汶

   ECS的誕生

  作為物件儲存領域的資深玩家,戴爾科技集團在物件儲存領域的耕耘歷史超過了20年,據胡淵汶介紹,2001年,戴爾易安信第一代物件儲存是CENTERA,CENTERA主要針對資料歸檔和法規遵從場景進行設計,並廣泛應用於金融行業,是針對特定場景專用儲存裝置。

  第二個時期是2009年,戴爾易安信推出第二代物件儲存ATMOS,從第二代物件儲存開始,物件儲存裝置以平臺的定位進入到資料中心,同時由於跨地域資料複製,跨地域資料訪問特性的引入,物件儲存的雲特性得以體現,因此從第二代物件儲存開始,物件儲存也被稱為雲端儲存平臺。

  時間進入到2014年,戴爾易安信又推出第三代物件儲存ECS,這是全球第一款直接支援Hadoop大資料分析平臺的物件儲存產品,同時透過直接提供HDFS介面以及跨HDFS和S3介面的資料互聯互通,使得物件儲存成為整個資料中心的資料湖平臺,支援海量資料的儲存、保護、訪問和分析。

   ECS解鎖非結構化資料增長的價值

  ECS是一款軟體定義的雲規模物件儲存平臺。藉助ECS,任何組織均可提供可擴充套件的公有云服務,同時獲得私有云基礎架構的可靠性和控制力。ECS在單一的現代儲存平臺上為非結構化工作負載提供全面的協議支援。藉助ECS,組織可在單個全域性名稱空間下輕鬆管理全域性分散式儲存基礎架構,並能隨時隨地訪問內容。

  ECS擁有靈活的軟體定義的體系結構,該體系結構採用分層式結構,有助於實現無限的可擴充套件性。每層均為完全抽象式,可以獨立擴充套件,並且具有高可用性,不存在單點故障。ECS還提供了完全整合的全包式一體機,將軟體和Dell PowerEdge伺服器捆綁成為一個易於部署的物件系統。

  據胡淵汶介紹,ECS的硬體一體機目前已經進入第三代,即EX系列,EX系列由四款獨特的硬體產品組成,即EX300、EX500、EX3000和全快閃記憶體EXF900。

  EX300是入門版產品,它以容量60TB起的群集選項降低了採用物件儲存的門檻。其容量可擴充套件到EB規模,最適合作為內部、雲原生、移動和Web應用程式儲存的沙盒。這種系統也是對現有CENTERA或ATMOS部署進行現代化改造的卓越之選。

  EX500是經濟性與密度的出色結合,為ECS一體機產品組合注入了更高的靈活性。EX500的機架容量從480TB到6.1PB不等,為希望支援現代化應用程式或深層歸檔應用場景的中型企業提供多樣性的選項。

  EX3000是一種採用可熱插拔磁碟的高密度物件儲存系統,每個機架的最高容量可達到11.5PB,並可輕鬆擴充套件到EB規模。它是滿足S3、HDFS和歸檔工作負載的長期保留、儲存整合和多用途物件儲存要求的出色平臺。

  EXF900裝置在Dell EMC PowerEdge伺服器上搭載基於NVMe的SSD,可為現代工作負載,例如AI、機器學習、物聯網和實時分析應用程式大幅提升效能。容量從每個機架230TB開始,並且最多可擴充套件至1.47PB。

   解密ECS三大核心優勢

   ECS可作為純軟體模式進行部署,也可作為全包式一體機進行部署,其具備以下三大優勢:

  無限制的擴充套件

  ECS採用橫向擴充套件、地理分散式體系結構,無論您的資料中心位於何處,都可以輕鬆跟上指數級資料增長的步伐。只需以類似於公有云的規模新增新節點和支援工作負載,同時實現私有云基礎架構的可靠性和控制。

  更為關鍵的是,ECS的企業規模、效能和多功能性帶來了更大的成本節約。資料顯示,與先進的公有云提供商相比,透過ECS構建一個物件儲存雲,總擁有成本可降低59.5%。

  據瞭解,海通證券利用ECS物件儲存的擴充套件性建立新的儲存資源池,降低了初期成本投入和TCO,並且解決了傳統磁帶庫效能低下、可靠性不足等問題,為資料全生命週期管理、人工智慧等技術在後續業務發展中的實際應用打下了良好的基礎。另基於ECS物件儲存提供的REST的介面,大大提高了圖片、影片等非結構化資料的檢索與訪問效能,使得業務辦理效率進一步提升,為資訊科技對業務的賦能開創了新的天地。

   全球連線

  ECS可以支援最多8個站點,雙活架構,資料可以就近存取,並允許跨區域複製資料。這意味著:理論上,分佈在全球的大規模PB級虛擬資料中心都能夠支援一個名稱空間。

  使用ECS的多站點聯合功能,組織可以建立全域性可訪問的內容儲存庫。透過在其支援的應用程式和使用者附近部署儲存,使用者可以更大限度地減少延遲和縮短價值實現時間。與獨特的複製功能相結合,地理位置分散區域中的客戶端可以訪問相同的資料,而不會產生大量的儲存開銷。

   安全合規

  ECS具備原生保護功能,確保所有資料中心區域的資料始終安全且可恢復。ECS使用高階保留、索引編制、複製和日誌記錄功能,可幫助您的組織滿足內部和外部法規遵從性要求,包括GDPR、SEC、CFTC和STIG法規。WORM功能可確保敏感資料受到保護,免受篡改。

  未來,戴爾科技集團還將會非常重視非結構化資料儲存市場,也會加大對非結構化資料儲存的投入,為客戶帶來更完善的解決方案。

來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/28285180/viewspace-2767971/,如需轉載,請註明出處,否則將追究法律責任。

相關文章