Apache基金會正式宣佈新一代分散式物件儲存Ozone成為頂級專案

CSDN資訊發表於2020-12-09

剛剛獲悉,Apache基金董事會通過一致表決,正式批准分散式檔案物件儲存Ozone從Hadoop社群孵化成功,成為獨立的Apache頂級開源專案。這意味著,作為騰訊大資料團隊首個參與和主導的開源專案,Ozone已得到全球Apache技術專家的一致認可,成為世界頂級的儲存開源專案之一。

Ozone 是Apache Hadoop社群推出的面向大資料領域的新一代分散式儲存系統,它的推出解決了Hadoop分散式檔案系統在可擴充套件性上限方面的缺陷問題,能夠支援百億甚至千億級檔案規模的儲存。

自1999年成立以來,Apache 軟體基金會已成功建立起強大的生態圈,其社群湧現了非常多優秀的開源專案,同時有越來越多國內外專案走向這個國際開源社群進行孵化。目前所有的 Apache 專案都需要經過孵化器孵化,滿足一系列質量要求之後才可畢業。Ozone從Hadoop社群孵化成功,不僅是專案本身的重要里程碑,也是對專案成員學習Apache Way和推動社群發展等一系列成果的認可。

今年9月,騰訊主導的Ozone 1.0.0版本在Apache Hadoop社群正式釋出,標誌著歷經了2年多的社群持續開發,Ozone 已經具備了在大規模生產環境下部署使用的能力。Ozone的設計,吸收和借鑑了很多HDFS的優點。同時支援相容AWS S3協議的物件訪問介面,且相容 Hadoop Compatible File System的分散式檔案訪問介面。

 

Ozone構架圖

除了參與和貢獻社群,在0zone的應用層面,騰訊也走在前列。據瞭解,在騰訊內部,目前已經在物件和容器等一些場景使用了Ozone,並且獲得了內部使用者積極的好評反饋,後續也會持續將這部分經驗分享出來。

隨著1.0.0 的釋出,騰訊參與和見證了 Ozone 孵化成為一個 Apache 頂級開源專案的過程。騰訊大資料團隊Ozone專案技術負責人陳怡也被社群推選為Apache Ozone 首位專案主席(Chair) ,同時專案團隊誕生了多位PMC成員和committer,帶領社群一起把Ozone向新一代大資料檔案物件儲存系統推進。

Ozone的生態棧

隨著Ozone 成為Apache 頂級專案,越來越多的貢獻者加入到社群的開發中。騰訊內部,一方面計劃在Ozone的基礎上,開發基於SCM的新一代高效能分散式檔案系統;另一方面,持續推進 Ozone 在更多業務落地,部署更大規模的生產叢集,進一步提高Ozone的可靠性、穩定性和效能,立志將Ozone打磨成為新一代檔案物件儲存的標杆。”騰訊雲大資料團隊Ozone專案技術負責人陳怡表示。

開源協同是當前騰訊最重要的技術戰略之一。以大資料團隊為代表的騰訊內部技術團隊經歷了從使用開源、回饋開源再到主導開源的演變。除了在Ozone專案上的貢獻之外,目前已完成了大資料核心能力全開源。如今,在Apache基金會的大資料專案上,騰訊已經為主流的Hadoop、Spark、Flink等專案貢獻了大量的特性和patch。

從各大開源基金會公開的資料來看,騰訊已經成為對開源社群貢獻最大的中國網際網路公司之一。

相關文章