dx1

 

近日,由中國電信主導制定的基於雲端計算的大資料需求與能力標準獲得國際電信聯盟ITU-SG13會議批准,ITU建議Y.3600進入釋出流程。

在當今的大資料時代,由於資料量大且複雜,使得傳統的資料技術無法快速且準確的傳輸和分析資料。 TU Y.3600指出了大資料環境下的功能需求和能力需求,並且列舉了雲端計算的使用案例,還詳細介紹了基於雲端計算的大資料,它具有資料收集、資料儲存、資料分析、資料視覺化和資料管理等能力,廣泛運用於各個領域。

ITU Y.3600標準首先明確給出了大資料的定義:在資訊和通訊技術快速發展的當代,巨大的資料量出現在我們的視野裡,在傳統資料處理方法和工具無法滿足我們的要求時,新的解決技術應運而生,這就是大資料技術。大資料的出現帶有它自己獨特的特徵:Volume、Variety、Velocity、Veracity、Value,分別代表著大資料的大量化、多樣化、快速化、準確化、價值化,我們一般簡稱它們為“5V”特徵,基於這五大特徵,大資料可以解決許多新的挑戰,創造更多新的機會。

同時該標準也描述了整個“大資料生態系統”,在該系統中包含資料供應商、大資料服務供應商和大資料服務客戶這三個角色,並給出了每個角色在業務鏈上的各自的角色扮演、必要的工作以及他們之間的關係,具體的大資料的生態系統如下圖所示:

QQ20150804-1

在大資料技術的基礎上,ITU Y.3600標準又提到了大資料與雲端計算之間的關係。大資料需要高效能的資料處理、分散式儲存以及各種所需的工具來完成上述所提到的大資料生態系統,而云計算則是起到了大資料技術和服務推動者的作用,工作負載的突發性使得雲端計算技術更加適合大資料應用,基於雲端計算的大資料生態系統能夠很有效的支援大資料,為大資料應用帶來更多的好處。將雲端計算對映到大資料中的作用如下表所示:

QQ20150804-2

雲端計算能夠為大資料提供靈活的處理、儲存和網路資源,實現規模成本最低化。根據雲端計算各角色對大資料的作用,得出基於雲端計算的大資料生態系統圖:

QQ20150804-3

最後,根據上述對大資料生態系統、應用場景的分析,該標準還分別從資料採集、資料預處理、資料儲存、資料分析、資料視覺化、資料管理、資料安全與保護這七個方面詳細定義了它們的功能需求和能力需求。

 

Y.3600標準是ITU-T在大資料系列標準中的第一個標準。該標準由中國電信牽頭編制,基於電信、網際網路、交通等行業大資料分析需求和技術發展提出的。該標準於2013年6月立項,歷時25個月的時間編制完成並獲得批准。同時中國電信還在國際電信聯盟ITU-T主導制定了雲端計算基礎設施需求(Y.3510)、IaaS服務功能需求(Y.3513)等多項標準,同時正在制定大資料即服務參考架構、雲間互聯參考架構等相關國際標準,這也標誌著中國在雲端計算、大資料研究領域已經處於領先地位,並將推進雲端計算、大資料等領域國際標準研究制定工作。