QingStor分散式儲存全線升級,踐行“為雲而生、自主研發”理念

lumin1020發表於2020-09-02


過去十年,企業級儲存市場正發生深刻變化。

兩大趨勢不可忽略,其一,分散式儲存正在經歷快速的增長時期。其二, 全快閃記憶體儲逐漸成為主流。

針對這兩大趨勢, 9 2 日, QingStor 研發團隊基於青雲 QingCloud 八年來在公有云、私有云環境下對於儲存的需求和技術的大量實踐,再次全面升級了包括 NeonSAN 、物件儲存、檔案儲存和融合儲存在內的四款產品。官方介紹表明,這四款產品可以支撐市面上幾乎全部主流的雲端計算產品。除了原生支援青雲 QingCloud 雲平臺,還包括 VMware 虛擬化平臺、 OpenStack 雲平臺,以及目前容器領域最火的 Kubernetes 容器平臺。

可以說,作為底層儲存引擎, QingStor 打造了 為雲設計、為雲而生 的系列儲存矩陣。

 

從零開始,自主研發,數萬客戶成功驗證

 

QingStor 儲存產品線研發負責人王煜在接受 IT168 記者採訪時表示, QingStor 全線產品都是從零開始,自主設計、自主研發。對於堅持自主研發初衷,王煜的解釋是,主要基於兩點原因。

第一,青雲 QingCloud 發現企業核心業務上雲,對於儲存的要求是非常嚴格的。這個嚴格不僅僅是傳統儲存對效能、穩定性的基礎性要求,更多的是雲端計算中複雜場景下對於安全性、隔離性、大規模水平擴充套件能力的要求。市面上很多主流的開源儲存,沒有一款能夠完全滿足上述所有要求。

業界有一款開源儲存 Ceph 在效能上存在很大弊端,很難承載企業客戶關鍵性的核心業務。 HDFS Google 2006 GFS 論文的開源實現,針對網際網路大資料的場景,並不是非常通用,它的單點問題、擴充套件性問題,都是難題。 HDFS 的底層是一個單機檔案系統,並沒有做太多的改造。所以單機檔案系統本身存在的問題,如海量小檔案的問題, HDFS 也存在。

第二,青雲 QingCloud 作為一家中國企業,在初心裡希望能夠為中國客戶提供全棧自主可控的優質產品,從而消除企業對資料安全的顧慮。

王煜透露,到目前為止 QingStor 的產品家族已經積累了數萬家企業客戶,同時部署在公有云和私有云上。在公有云部分, QingStor 全線產品已經上線和部署在青雲 QingCloud 8 個公有云區。在私有云部分, QingStor 幾乎覆蓋了全部主流的行業,擁有非常多的行業客戶案例,包括銀行、保險、證券、製造、能源、醫療等。特別要強調一點,青雲 QingCloud 跟其他做公有云、私有云的公司最大的不同是, QingStor 在公有云和私有云是採用同一套架構,同一套程式碼實現的。可以說, QingStor 全線產品是經過公有云和私有云共同的檢驗,得到大規模生產環境驗證的。

 

四款儲存獨立設計的專業儲存

對於此次推出的四款新品,王煜強調,和開源儲存或者基於開源儲存的商業儲存產品是完全不同的,前者在架構設計之初就採用了獨立的設計方法。對於使用者來說,極致效能需求、海量資料需求、通用場景或者高價效比的各種需求都能得到滿足。

Ceph 為代表的開源儲存,看似透過 銀彈架構 能夠解決所有儲存場景的問題,但實際是以犧牲或者弱化某些功能為代價的。

因此青雲 QingCloud 在設計之初就把儲存場景大概分為熱資料、冷資料、溫資料以及混合場景,分別進行獨立設計和開發。

QingStor NeonSAN 為例。它的定位是一款擁有極致效能的分散式儲存產品。因此採用縮短 I/O 路徑棧、去掉本地檔案系統、提高協議轉換效率等方法,來提升效能。正是因為這樣的設計, QingStor NeonSAN 能夠穩定地支撐企業的核心業務,比如核心資料庫 Oracle RAC 。記者在之前採訪到的可以穩定、快速地執行 Oracle RAC 的,幾乎全都是傳統儲存。 QingStor NeonSAN 作為一款分散式儲存產品,能夠很好支援 Oracle RAC 的儲存產品可以算是一次突破。

物件儲存作為分散式儲存領域裡一個新晉的派系,能夠解決非結構化資料儲存的問題,如海量圖片、音影片、日誌、歸檔備份等等。因此 QingStor 物件儲存設計的核心是承載海量的資料。在整個架構設計時,採用了完全 Share-Nothing 的架構,沒有任何單點,每一個元件都是可以無限水平擴充套件,並且效能不會下降。這次釋出的 QingStor 物件儲存 3.0 版本,據王煜介紹其單 bucket (儲存桶)可以支撐 100 億個物件的同時,效能不會有所下降。

如果我們評價儲存技術是整個 IT 技術的皇冠,檔案儲存應該是皇冠上的明珠。檔案儲存在技術架構的實現上是非常複雜和艱難的。此次釋出的 QingStor 檔案儲存 2.0 版本,是為通用場景設計的。 QingStor 檔案儲存的介面協議部分可以完整支援 POSIX 語義介面,從而幫助企業零成本無縫對接企業內部各種應用系統。

  融合儲存與開源 Ceph 有一個非常本質的區別,就是它是一款不為效能妥協的融合儲存。 青雲 QingCloud 的目標是希望給使用者提供統一管理體驗,提供統一儲存池的同時,還能完完整整地享受到前三款專業儲存的功能和效能。這也是透過   融合儲存來實現的。

對於未來儲存的發展方向,王煜表示將與更多合作伙伴攜手,藉助軟體定義儲存生態的力量,不斷助力企業升級儲存架構,全面滿足企業使用者的儲存需求,為企業上雲提供儲存動力。

 


來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/69965512/viewspace-2716577/,如需轉載,請註明出處,否則將追究法律責任。

相關文章