據IDC預計,到2017年,大資料技術與服務市場的年複合增長率將達到27%,屆時整體市場規模也增長至324億美元。根據IDC的說法,為了幫助大家更為直觀地進行比較,大資料市場的增長速度比資訊及通訊技術市場的整體增幅高出六倍。

儘管資金在不斷湧入,但企業花掉的真金白銀到底能不能買回個光明的未來還真說不準——畢竟目前尚處於大資料技術部署的早期階段。為了找到確切答案,研究人員們調查了多位IT高管及中層管理人員,旨在瞭解他們所在企業在大資料領域的計劃、投資以及發展傾向等情況。

以下是2014年大資料調查的一部分關鍵性結論:

這項調查所涉及的各企業分別處於大資料部署的不同階段。其中一些已經完成了實施工作(19%),也有一些尚處於大資料專案的實施過程之中(25%)。其它不少企業則正在制定部署規劃——具體時間為未來12個月之內(16%)或者未來13到24個月之內(16%)。最後剩下的這部分企業(23%)距離大資料專案的實施目標似乎還有很長的道路要走,他們往往還在糾結於尋找正確的執行策略或者解決方案。

從巨集觀前景角度看,大資料對於任何行業、任何規模的企業而言都具備極其重要的意義。在被問及企業為大資料規劃制定的重要級別時,53%的受訪者表示他們的專案處於關鍵性或者高優先順序地位,另有34%的受訪者表示屬於中等優先順序別。只有12%的受訪者將其劃入低優先順序範疇。

BIGSURVEY

下面我們概括歸納受訪者們對於大資料的觀點:

 1.企業希望更好也更快地作出決策。

為什麼要選擇大資料?因為它在幫助企業快速制定高質量決策方面扮演著關鍵性角色。在促使企業向大資料專案投入資金方面,有兩點因素最為重要,它們分別是改進決策質量(受到59%受訪者的認同)以及提高決策速度(受到53%受訪者的認同)。

在大資料作用目標排名當中,緊隨以上兩點之後的是改進規劃與預測(47%)、開發新產品/服務以及收來源(47%)、改進新客戶吸納/現有客戶保留情況(44%)以及建立新的業務合作關係(34%)。

2.資料量達到PB級別?更多大型企業面臨資料爆炸這一現實問題。

企業在運營過程中積累下與客戶及業務發展相關的龐大資料集。在全部受訪者當中,當前正在管理的平均資料規模已經達到了164TB。在被問及預計從現在起未來12到18個月內所需管理的資料總量時,受訪者給出的平均答案為289TB——增長幅度高達76%。

就目前來看,已經有6%的受訪者在管理著數量超過1PB的龐大資料;而在接下來的十二到十八個月內,這部分受訪者的比例將上升至14%。而在規模最大的企業當中(即年營收數額至少達到10億美元),有31%的受訪者預計需要管理的資料量將超過1PB。

3.企業感受到資料超載所引發的後果。

面對當前大量資料持續湧入的狀況,企業也開始體會到由此帶來的負面結果。舉例來說:由於無法迅速找到所需資訊而錯失業務(31%的受訪者表示此類情況偶爾發生、11%的受訪者則表示經常發生);無法及時作出重要決策(39%的受訪者表示此類情況偶爾發生、14%的受訪者表示經常發生);使用者反映資料量過大而不堪重負(46%的受訪者表示偶爾發生、19%則表示經常發生);資料安全性方面也可能出現問題(46%的受訪者表示偶爾發生、19%則表示經常發生)。

 

 4.企業準備投資,而投資回報率目前也不再是主要障礙。

調查發現,大資料推廣所面臨的最大挑戰在於日益緊迫的預算。在受訪者當中,投資數額存在著一定差別。在低端層面,19%的受訪者表示將在未來一年中向大資料專案投入10萬美元以下的資金。而在高階層面,有29%的受訪者表示將在大資料領域投入100萬美元以上(其中更有2%的受訪者計劃投入1億美元甚至更高額度的資金)。

相關資金會花在與大資料相關的各個投入專案,其中包括:

●開發或者購買軟體應用程式(38%);

●用於新增額外的伺服器或者儲存硬體/軟體(37%);

●採用開源軟體框架(例如Apache Hadoop)(30%);

●遷移到基於雲環境的儲存服務(28%);

●增加網路頻寬(27%);

●遷移到基於雲環境的分析服務(26%)。

然而,儘管預算成為最普遍的難題,但投資回報率方面所並沒有帶來什麼壓力。只有26%的受訪者認為當前投資的主要阻礙在於很難證明大資料專案帶來投資回報的能力。

5.企業面臨人才短缺的困境。

企業擔心在內部環境中找不到有能力負責大資料相關事務的人才——譬如知識員工以及資料科學家——這就導致大資料計劃很可能無法得到充分利用。在人員方面,34%的受訪企業目前正在招聘擁有分析技能的人才、26%則選擇將這部分工作外包給大資料專業服務供應商。

在被問及未來十二到十八個月內計劃新增哪些技術人員組合時,資料科學家(27%)名列榜首,接下來依次為:資料架構師(24%)、資料分析師(24%)、資料視覺化專家(23%)、業務分析師(21%)、研究分析師(21%)、分析主管或者經理(19%)以及資料庫程式設計師(19%)。

 6.資料安全成為關注重點,但並非最緊要的問題。

根據此次調查,預算有限與人才稀缺並列成為大資料挑戰當中最為緊迫的兩大難題。此外,受訪者們同樣關注安全問題(35%)、開發時間(35%)、遺留問題——例如現有工具的整合(33%)、糟糕的資料質量(32%)以及資料實時整合或者分析難題(30%)。

在談到安全話題時,接近一半的受訪者(49%)表示他們的現有安全解決方案及產品足以保障大資料專案的安全。29%的受訪者表示現有機制還不夠可靠,而另外22%則表示對此無法確定。

 7.哪個難題更令人頭痛:業務整合還是文化接納?

研究人員向受訪者們詢問了他們在將大資料規劃融入企業業務流程及文化中時所遭遇的挑戰。通過選擇“極具挑戰性”和“頗具挑戰性”答案的受訪者比例,我們發現文化整合(54%)以微弱的得票數優勢壓倒了業務流程整合(50%),從而在這場並不光榮的比拼中勝出。

8. IT主導大資料規劃,但成功與否卻取決於跨職能合作關係。

在受訪者當中,大資料專案由IT部門主導已經成為普遍作法:46%的受訪者表示企業中是由高階或者高層IT管理者來統領大資料規劃,而44%的受訪者表示由IT管理者負責大資料專案的運作。不過後者的答案也並非如此單純:其中36%的受訪者指出高層業務領導者同樣會參與進來。另外,受訪者們表示他們的大資料專案得到了CEO(47%)或者LOB級別的支援與贊助。IT與業務部門負責人都認為大資料專案在由雙方共同擁有並實施時,解決特定業務挑戰的效果最為出色。

9.大資料發展勢頭在多數企業中仍將持續。

展望未來,接近一半(48%)的受訪者認為未來三年大資料在使用率方面將普及到企業的每個角落,但另外26%的受訪者則表示大資料最終的覆蓋範疇只能達到一個或者多個業務單位、部門或者分支機構。只有5%的受訪者預計大資料會在這股炒作風潮平息後被打入冷宮,而另外5%表示不能確定。其餘的16%受訪者認為大資料將繼續作為實驗性技術存在,但不會出現在主流產品當中。