QingStor分散式儲存全線升級,踐行“為雲而生、自主研發”理念
過去十年,企業級儲存市場正發生深刻變化。
兩大趨勢不可忽略,其一,分散式儲存正在經歷快速的增長時期。其二, 全快閃記憶體儲逐漸成為主流。
針對這兩大趨勢, 9 月 2 日, QingStor 研發團隊基於青雲 QingCloud 八年來在公有云、私有云環境下對於儲存的需求和技術的大量實踐,再次全面升級了包括 NeonSAN 、物件儲存、檔案儲存和融合儲存在內的四款產品。官方介紹表明,這四款產品可以支撐市面上幾乎全部主流的雲端計算產品。除了原生支援青雲 QingCloud 雲平臺,還包括 VMware 虛擬化平臺、 OpenStack 雲平臺,以及目前容器領域最火的 Kubernetes 容器平臺。
可以說,作為底層儲存引擎, QingStor 打造了 “ 為雲設計、為雲而生 ” 的系列儲存矩陣。
從零開始,自主研發,數萬客戶成功驗證
QingStor 儲存產品線研發負責人王煜在接受 IT168 記者採訪時表示, QingStor 全線產品都是從零開始,自主設計、自主研發。對於堅持自主研發初衷,王煜的解釋是,主要基於兩點原因。
第一,青雲 QingCloud 發現企業核心業務上雲,對於儲存的要求是非常嚴格的。這個嚴格不僅僅是傳統儲存對效能、穩定性的基礎性要求,更多的是雲端計算中複雜場景下對於安全性、隔離性、大規模水平擴充套件能力的要求。市面上很多主流的開源儲存,沒有一款能夠完全滿足上述所有要求。
業界有一款開源儲存 Ceph 在效能上存在很大弊端,很難承載企業客戶關鍵性的核心業務。 HDFS 是 Google 2006 年 GFS 論文的開源實現,針對網際網路大資料的場景,並不是非常通用,它的單點問題、擴充套件性問題,都是難題。 HDFS 的底層是一個單機檔案系統,並沒有做太多的改造。所以單機檔案系統本身存在的問題,如海量小檔案的問題, HDFS 也存在。
第二,青雲 QingCloud 作為一家中國企業,在初心裡希望能夠為中國客戶提供全棧自主可控的優質產品,從而消除企業對資料安全的顧慮。
王煜透露,到目前為止 QingStor 的產品家族已經積累了數萬家企業客戶,同時部署在公有云和私有云上。在公有云部分, QingStor 全線產品已經上線和部署在青雲 QingCloud 的 8 個公有云區。在私有云部分, QingStor 幾乎覆蓋了全部主流的行業,擁有非常多的行業客戶案例,包括銀行、保險、證券、製造、能源、醫療等。特別要強調一點,青雲 QingCloud 跟其他做公有云、私有云的公司最大的不同是, QingStor 在公有云和私有云是採用同一套架構,同一套程式碼實現的。可以說, QingStor 全線產品是經過公有云和私有云共同的檢驗,得到大規模生產環境驗證的。
四款儲存獨立設計的專業儲存
對於此次推出的四款新品,王煜強調,和開源儲存或者基於開源儲存的商業儲存產品是完全不同的,前者在架構設計之初就採用了獨立的設計方法。對於使用者來說,極致效能需求、海量資料需求、通用場景或者高價效比的各種需求都能得到滿足。
以 Ceph 為代表的開源儲存,看似透過 “ 銀彈架構 ” 能夠解決所有儲存場景的問題,但實際是以犧牲或者弱化某些功能為代價的。
因此青雲 QingCloud 在設計之初就把儲存場景大概分為熱資料、冷資料、溫資料以及混合場景,分別進行獨立設計和開發。
以 QingStor NeonSAN 為例。它的定位是一款擁有極致效能的分散式儲存產品。因此採用縮短 I/O 路徑棧、去掉本地檔案系統、提高協議轉換效率等方法,來提升效能。正是因為這樣的設計, QingStor NeonSAN 能夠穩定地支撐企業的核心業務,比如核心資料庫 Oracle RAC 。記者在之前採訪到的可以穩定、快速地執行 Oracle RAC 的,幾乎全都是傳統儲存。 QingStor NeonSAN 作為一款分散式儲存產品,能夠很好支援 Oracle RAC 的儲存產品可以算是一次突破。
物件儲存作為分散式儲存領域裡一個新晉的派系,能夠解決非結構化資料儲存的問題,如海量圖片、音影片、日誌、歸檔備份等等。因此 QingStor 物件儲存設計的核心是承載海量的資料。在整個架構設計時,採用了完全 Share-Nothing 的架構,沒有任何單點,每一個元件都是可以無限水平擴充套件,並且效能不會下降。這次釋出的 QingStor 物件儲存 3.0 版本,據王煜介紹其單 bucket (儲存桶)可以支撐 100 億個物件的同時,效能不會有所下降。
如果我們評價儲存技術是整個 IT 技術的皇冠,檔案儲存應該是皇冠上的明珠。檔案儲存在技術架構的實現上是非常複雜和艱難的。此次釋出的 QingStor 檔案儲存 2.0 版本,是為通用場景設計的。 QingStor 檔案儲存的介面協議部分可以完整支援 POSIX 語義介面,從而幫助企業零成本無縫對接企業內部各種應用系統。
融合儲存與開源 Ceph 有一個非常本質的區別,就是它是一款不為效能妥協的融合儲存。 青雲 QingCloud 的目標是希望給使用者提供統一管理體驗,提供統一儲存池的同時,還能完完整整地享受到前三款專業儲存的功能和效能。這也是透過 融合儲存來實現的。
對於未來儲存的發展方向,王煜表示將與更多合作伙伴攜手,藉助軟體定義儲存生態的力量,不斷助力企業升級儲存架構,全面滿足企業使用者的儲存需求,為企業上雲提供儲存動力。
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/69965512/viewspace-2716577/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- 分散式塊儲存 ZBS 的自主研發之旅 | 架構篇分散式架構
- 企業級分散式儲存QingStor的競爭優勢分散式
- 分散式塊儲存 ZBS 的自主研發之旅|後設資料管理分散式
- 效能躍升50%!解密自主研發的金融級分散式關聯式資料庫OceanBase 2.0解密分散式資料庫
- 企業雲盤專業級分散式儲存伺服器分散式伺服器
- Longhorn,企業級雲原生容器分散式儲存 - 備份與恢復分散式
- 讓遊戲研發、發行、運營更簡單!騰訊遊戲雲全生命週期解決方案升級遊戲
- 分散式系統中資料儲存方案實踐分散式
- Redis 分散式儲存Redis分散式
- HDFS分散式儲存分散式
- 分散式儲存概述分散式
- QingStor 物件儲存服務正式商用物件
- Longhorn 雲原生容器分散式儲存 - Python Client分散式Pythonclient
- Longhorn 雲原生容器分散式儲存 - 故障排除指南分散式
- Longhorn,企業級雲原生容器分散式儲存 - 監控(Prometheus+AlertManager+Grafana)分散式PrometheusGrafana
- Longhorn,企業級雲原生容器分散式儲存 - 定製預設設定分散式
- 分散式日誌儲存架構程式碼實踐分散式架構
- 分散式儲存系統的最佳實踐:系統發展路徑分散式
- 滿足多場景資料管理需求 聯想凌拓全自研分散式儲存登場分散式
- 手把手教你使用 QingStor 物件儲存物件
- Hadoop 分散式儲存分散式計算Hadoop分散式
- Longhorn,Kubernetes 雲原生分散式塊儲存分散式
- Longhorn 雲原生容器分散式儲存 - Air Gap 安裝分散式AI
- 行式儲存 列式儲存
- DAOS 分散式非同步物件儲存|儲存模型分散式非同步物件模型
- 分散式儲存ceph 物件儲存配置zone同步分散式物件
- 分散式系統中的資料儲存方案實踐分散式
- 分散式儲存產業方陣:2022年分散式儲存發展白皮書(附下載)分散式產業
- Longhorn 企業級雲原生分散式容器儲存-券(Volume)和節點(Node)分散式
- Longhorn,企業級雲原生容器分散式儲存 - K8S 資源配置示例分散式K8S
- 分散式儲存轉崗記分散式
- 分散式儲存技術概念分散式
- 小紅書自研KV儲存架構如何實現萬億量級儲存與跨雲多活架構
- 為研發效能而生|一場與 Serverless 的博弈Server
- Gartner:浪潮儲存進入分散式儲存前三分散式
- TDengine 的儲存引擎升級之路儲存引擎
- 分散式檔案儲存庫MinIO可還行?分散式
- 哪些企業需要分散式式儲存?分散式