剛剛獲悉,全球最大的開源軟體基金會Apache軟體基金會正式宣佈,Apache InLong成為成功從Apache孵化器畢業成為社群頂級專案,這也是Apache社群首個一站式大資料整合頂級專案。這個最初由騰訊捐獻給Apache社群的一站式海量資料整合框架,可以為大資料開發者提供百萬億級資料流高效能處理能力,以及千億級資料流高可靠服務。
這是繼騰訊開源專案 Angel 從 LF AI 基金會畢業成為世界頂級的 AI 開源專案之後,騰訊大資料團隊在開源領域創造的又一里程碑。作為國內國內大資料領域開源最全面的公司,Apache InLong畢業成為Apache頂級專案,將進一步鞏固騰訊在大資料領域的領先地位。
“我們很高興看到InLong踐行Apache Way,並以頂級專案的身份從Apache孵化器畢業,”騰訊副總裁蔣傑表示:“騰訊致力於構建開源生態系統,讓全球開發者能夠平等便捷地利用開原始碼。作為騰訊最成功的開源專案之一,InLong廣泛應用於騰訊內部海量業務以及外部的金融、政府等關鍵業務。未來,騰訊將持續為社群貢獻我們的力量,攜手全球開發者共同構建繁榮的大資料生態系統。”
據悉,Apache軟體基金會對所有的 Apache 專案都要嚴格篩選並經過孵化器孵化,滿足一系列質量要求之後才可畢業。從孵化器裡畢業的頂級專案,表明該專案的社群和產品已根據ASF的精英流程和原則得到良好管理。
InLong中文名“應龍”是中國神話中引流入海的神獸,意寓InLong在大資料社群生態中的價值:大資料接入整合。
InLong以騰訊內部使用的TDBank為基礎,依託萬億級的資料攝取和處理能力,將資料採集、聚合、儲存、排序資料處理的全流程整合在一起。不僅提供自動、安全、可靠和高效能的資料傳輸能力,還支援基於流式的資料分析、建模和應用,幫助企業簡化資料處理的過程。
比如,InLong 作為一個基於SaaS 的服務平臺,使用者可以選擇主題的資料釋出和訂閱,來輕鬆快速地報告、傳輸和分發資料,大幅降低了使用門檻。同時InLong可以為100萬億級資料流提供高效能處理能力,為1000億級資料流提供高可靠服務,保障使用者享受到穩定可靠的線上服務。
InLong支援多種資料訪問方式,包括不同型別的訊息佇列服務整合和實時資料提取、轉換、載入以及基於規則的排序功能;在服務方面,InLong為使用者提供統一的系統監控和告警服務。透過細粒度的指標來促進資料視覺化,使用者可以在統一的資料度量平臺中直接檢視佇列的執行狀態,大大提高了業務的主動性。
實際上,在騰訊內部InLong專案原名TubeMQ,主要專注於高效能、低成本的訊息佇列服務,並長期服務微信支付、騰訊影片、廣點通等產品。為了進一步釋放TubeMQ周邊的生態能力,騰訊將專案升級為InLong,專注打造一站式海量資料整合框架。該專案於2019年11月進入 Apache 孵化器,2022 年6月畢業成為頂級專案。
目前, Apache InLong已經發布第12個版本,騰訊大資料 InLong 團隊和社群開發者一起,在孵化期間不斷更新和完善其功能,比如重構InLong Sort模組、新增資料節點、最佳化初始化流程等,為社群和企業提供更多元化的開放解決方案。與此同時,InLong正在廣泛應用於廣告、支付、社交、遊戲、人工智慧等各個行業領域,為多領域客戶提供高效化便捷化服務。
“InLong的畢業,標誌著一個開放、多元、成熟的開源社群的成功建立。在未來的征程中,專案將繼續踐行“Apache Way”,透過社群的共同努力,助力更多企業數字化轉型。”Apache InLong 副總裁 Charles Zhang 說。
“恭喜 Apache InLong 作為 ASF TLP 畢業!” NextArch 基金會 TOC 的 Mark Shan 說。 “InLong降低大資料使用門檻,期待InLong為社群和企業提供更多元化的開放解決方案。”
騰訊作為國內最早擁抱開源的科技公司之一,截至目前在 Github 上共釋出了超過 160 個開源專案,獲得了超過 40 萬名開發者的關注和 Star,穩居全球開源企業貢獻榜前十。目前,騰訊已經是 Apache 基金會、Linux 基金會、CNCF、開放原子基金會等國際頂級開源基金會的重要成員,並向開源基金會捐贈了Angel、TubeMQ、TKE Stack、TencentOS Tiny 等專案。在Apache基金會的大資料專案上,騰訊已經為主流的Hadoop、Spark、Flink等專案貢獻了大量的特性和patch。在內部開源協同和自研上雲戰略驅動下,騰訊將會透過騰訊雲,開放更多的大資料以及AI領域的產品化能力,為更多開發者提供低成本、高效能的開發工具。