撬動智慧世界的“支點”,大資料緣何具有如此魔力

dobigdata發表於2021-11-11

“您於14天內到達或途徑:‘長沙市’、‘貴陽市’、‘宜賓市’”......

14億人,663座城市,960萬平方公里,出行資訊一碼識別,在人海之中將你我精準關聯、將出行點滴完整具象,這背後便是“大資料”的強大魔力!

大資料,首要的就是“大”,單個資料幾乎沒有商業價值,但當資料量不斷累積到足夠“大”時,便能成為阿基米德口中的“支點”,撬動智慧化的星辰大海。除數量(Volume)之外,大資料還包含有速度(Velocity)、多樣化(Variety)、準確性(Veracity)、價值(Value)共稱“5V”特點。

撬動智慧世界的“支點”,大資料緣何具有如此魔力

資料一直都在,從人類第一次結繩計數開始;資料又隱於無形,直到DT(Data Technology)時代,人類才發現如何去挖掘大資料的價值(Value),大資料才開始揭開真正的面紗。

基於多年在製造、通訊、交通、教育等行業的探索和沉澱,拓維資訊從海量行業資料的產生、獲取、挖掘及整合,到資料價值的深度解碼、先行先用進行持續探索,成為大資料技術的“懂行人”。

在“大資料元年”——2013年,拓維資訊便與華為、IBM、Intel等行業巨頭一同助力中國移動集團完成大資料平臺技術指導規範,成為了最早一批入局大資料領域的企業。

深耕底層,讓技術應用心中有“數”


“未來一切業務資料化,一切資料業務化”。

回溯歷史,每一個時代,文明的發展往往需要核心技術的驅動,從蒸汽機的誕生帶來物理世界的變革,到IT技術的使用帶來數字世界的騰飛。未來,文明的發展將進入數字世界與物理世界的深度融合,“資料”作為兩個世界的連線點,將跟隨大資料技術的探索,為文明發展帶來革命性的變局。
自“大資料元年”以來,拓維資訊緊跟大資料技術與概念的發展趨勢,從“業務資訊的資料化積累”到“業務資訊資料驅動業務決策”,以具體業務目標為導向,對既有資料進行加工、分析、處理,為業務決策提供高效輔助;從底層技術探索到頂層應用開發,自下而上全面探索大資料技術、挖掘大資料價值。

撬動智慧世界的“支點”,大資料緣何具有如此魔力

拓維資訊大資料架構圖

一般意義上,大資料技術可以分成兩個大的層面:大資料平臺技術和大資料應用技術。其中,大資料平臺技術包括了資料的採集、儲存、流轉、加工所需要的底層技術;大資料應用技術是指對資料進行加工,把資料轉化成商業價值的技術。拓維資訊對大資料領域進行了“全面化、深度化、開放化”的技術佈局:

大資料平臺技術體系最佳化研究

拓維資訊根據現有大資料平臺建設的基礎,基於hadoop等生態圈,進行技術封裝、管理、最佳化,以此對標全球大資料先進技術。

大資料分析應用體系頂層架構研究

拓維資訊組建大資料專業技術團隊,進行大資料體系頂層架構設計與大資料分析應用內容設計的研究,其中包含了設計的總體思路、建設內容、技術架構、產品選型等。

除此之外,拓維資訊基於多年深耕行業的“業務資料化”經驗,全面深入“資料業務化”,從大資料的資料保障體系建設和資料治理工作推進,精準洞察、精確建議。其中包含了梳理資料管理組織職責、流程與績效體系制度等;開展資料資源梳理分析,構建資料標準體系;完善資料質量管理,統一後設資料的管理等內容。


工欲善其事,必先利其器。拓維資訊對於大資料的理解,將自己的角色不僅僅限制在“使用者”,更是深度融入到了大資料應用生態之中,根據業務佈局和需求打造完善的產品體系,做技術的“生產者”。

撬動智慧世界的“支點”,大資料緣何具有如此魔力

上圖是拓維資訊基於大資料技術生態深度自研的大資料產品族,其根據業務需求與其他主流的大資料技術一起打造混搭型技術架構,將資料採集、資料計算、資料加工、資料分析、機器學習、資料應用等維度成功串聯,打通大資料價值解碼的全鏈條。

懂行善用,通訊行業的大資料實踐

“截至2020年10月末,三家基礎電信企業的行動電話使用者總數達16億戶。”

正如引言中提到的通訊大資料,通訊行業的自有屬性離不開“大資料”這個標籤,也正是因為如此,通訊行業成為國內大資料先行者之一。

拓維資訊深耕通訊行業20餘年,用技術實力與國內外知名大廠同臺競爭。其中在大資料領域,除了參與中國移動大資料平臺技術指導規範建設外,拓維資訊依託自身在大資料領域積累的全面技術、產品和方案,以及多年在通訊等行業中的大資料創新實踐,成功參與了集團-省-市三級通訊公司的多項大資料建設專案。

以拓維資訊承建的中國移動研究院網際網路內容分析大資料平臺專案為例,它包含有規模超百萬級小說庫、88098條的URL規則庫、916722392條的URL例項庫、超70000條的網際網路分類機器學習語料庫及近2000種的APP指紋識別庫等,每天處理千億規模的上網日誌行為資料(以上資料為專案建設時資料)。

拓維資訊根據企業“資料”現狀,構建“平臺”、“服務”、“應用”三級大資料解決方案,其中資料平臺構建從資料採集、資料融合、資料清洗、資料治理出發,進而實現海量日誌資料的精準分析。根據多年的行業經驗,精準地打造了分析、資料等服務,以此支撐架構頂層的系列資料應用。

此外,隨著拓維資訊持續在通訊行業的大資料創新實踐,從大資料平臺技術到大資料應用技術,為通訊行業帶來全新的商業邏輯體驗,用大資料驅動精準營銷。在中國聯通“一起沃”大資料精準營銷運營專案中,拓維資訊以大資料技術為基石,透過全渠道、全觸點、全使用者、全生命週期的“四全”智慧營銷分發平臺,實現營銷能力的數字化升級。

資料驅動,助力企業數字化升級

“資料是DT(Data Technology)時代的第一生產要素!”
不止於通訊,大資料對於全行業都是一次革新的機會。拓維資訊從行業深耕到技術賦能,實現業務資料化向資料業務化的轉變,以“懂行者”的角色助力通訊、製造、教育、交通等多行業客戶數字化升級。

教育大資料:加強教育大資料治理、構建教育大資料技術體系及分析應用

某區域智慧教育由於建設初期缺乏統一的頂層規劃,造成各個系統相互獨立、應用分散、資料分散和資源分散,導致各部門間共享資料困難,產生大量的資料孤島、應用孤島以及重複建設等問題。拓維資訊從提升資料質量、推動資料共享和擴大資料應用三個角度助力該區域打造教育大資料治理平臺,最佳化資料基礎,繼而構建由資料產生、資料採集、資料加工、資料儲存到資料應用構成的全鏈條大資料技術體系,與區域各級教育管理部門、學校,以及各類教育應用建設企業攜手共建,最終實現教育大資料的高效共享和應用,構建區域智慧教育生態圈。

高速大資料:構建資料中臺與業務中臺的高融合

自2020年1月1日全國高速取消跨界收費以來,全國超14萬公里的高速公路上面臨著每日新增100TB級別的資料,每月近10億級別的流水記錄;產生約 4PB的圖片資料,且技術要求圖片查詢速度不高於1秒等等資料難題。拓維資訊基於以上資料難題,為湖南高速融合“資料、技術、業務”三大中臺打造智慧中臺大腦,使能智慧高速業務,為AI稽核等業務場景提供資料基礎,打造智慧高速典型資料應用。

製造大資料:精益製造、高效管理

拓維資訊為中煙某省分公司打造生產資料智慧分析平臺,實現關鍵工藝的實時預測與控制、裝置預防維護評估、維修換件與庫存最佳化等多項大資料應用,以多端資料視覺化推動捲菸生產線精益製造管理,助力菸草行業數字化升級。

“大資料帶來的資訊風暴正在變革我們的生活、工作和思維,大資料開啟了一次重大的時代轉型。”——Viktor Mayer-Schönberger《大資料時代》

資料時代,作為人類社會繼農業時代、工業時代後的全新發展階段,“資料”已替代舊時代的生產要素,驅動著社會的發展變革。身處於DT時代的浪潮中,每個人、每件事、每個標籤、每個符號......都可以化作為“資料”汪洋中的一個位元組,在見證時代的同時也驅動著時代發展。

這是現在,也是未來,這就是大資料!


來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/69965091/viewspace-2841700/,如需轉載,請註明出處,否則將追究法律責任。

相關文章