John Bantleman是RainStor的CEO,有著20多年的從業經驗。他在《連線》上發表了一篇文章稱大資料在2013年將成為企業需要面對的重要問題之一,並且對今年大資料帶來的挑戰進行了5個方面的預測。
以下為文章全文:
2012年,大資料已經被證明是一個重要的趨勢,並且對來年的大資料市場進行了很多的預測。現實情況是,客戶將最終決定大資料的發展趨勢,也將決定使用哪些技術解決方案來解決他們的獨特業務問題。
在如今由資料驅動發展的世界裡,企業為了保持競爭力,大資料已成為它們必須解決問題。就像雲端計算髮展在過去的幾年中的起起伏伏,它現在已經開始促使企業改 變其基礎設施建設,以應對複雜的挑戰。根據最近的一項研究表明,大資料的數量預計將在2013年增加約60%,這個問題預計不會很快消失。
所以應該能看到,企業在2013年會面對大資料帶來的商業或技術方面的挑戰。我們可以肯定一件事——在2013年,無論是大資料方面的技術變革還是公司董事會在產業上的決策,都將產生變化。
預測1:企業大資料主動從Sandbox遷出,並定義一套明確的業務和技術需求
在2012年,企業在大資料上面的主動升級,超過了大多數人的預測。根據對世界上300個大企業的研究顯示,資料量預計將在2013年增加約60%。13%的受訪者表示他們對大資料的準備已經到位。另外有38%的公司有了實施計劃。
企業正在形成專門的大資料團隊,對很多人來說這在預算上已經成為一系列的專案,因為企業需要繼續尋找更好的方法來管理、儲存和分析他們持續增長的、必須保 持線上的、可用於分析的資料據資產。我們將會看到更多明確定義的需求開始出現——無論是在業務方面還是在IT方面,如低成本的可擴充套件性、快速響應的查詢和 分析,以及充分利用現有的基於標準的工具(包括SQL和BI)的能力等。這是除了內建的安全性和資料可用性功能外,企業期待出現的功能。
預測2:公司在管理大資料時將尋求除了Hadoop以外新的技術組合
過去一年,Hadoop的勢頭越來越猛。Hadoop通過Web 2.0組織的推廣,現在受到了銀行、金融機構、電信執行商、大型零售商和其他企業的重視。然而,大資料的舉措不僅集中在Hadoop平臺。
業務和IT的挑戰在於在不同的部門甚至於不同的公司之間組合使用各種不同的技術協調工作。企業部署私有云來管理資料財產與傳統的資料庫和資料倉儲環境這兩 者的結合,以及在各種硬體上執行的Hadoop基礎環境。所有企業大資料專案的一個共同的主題是渴望可以快速啟動和執行而不會造成干擾到現有的IT環境。
預測3:預算限制是解決大資料挑戰的最大障礙之一
大資料的支出正在上升,在未來一年,成本問題仍將是啟動大資料專案時最大的一個障礙之一。根據最近的一項分析報告顯示,大資料支出在2013年預計達到 340億美元。這些支出一方面是因為某些特殊行業組織由於行業的特殊性,必須保持資料線上和可用性;另一方面是由於企業想要利用來自多個源的資料的更多的 資訊,以進行更好的分析。這需要進行一個適當的平衡——在滿足業務需求的同時,尋找最高效的技術基礎設施——是一個挑戰。
大資料的增長速度不會減慢。現有需求和未來需求的建設能力是至關重要的。太多太快不是要走的路,大資料並不一定意味著大筆的預算。
預測4:大資料工具必須同時滿足業務和技術使用者
在2013年,我們將看到大資料工具和應用程式的需求增長,它們將變得更容易使用,並且將同時滿足業務和技術使用者。如果你深入瞭解下Hadoop的基礎技 術能力,就會看到其在許多方面仍不成熟,需要獨特的專業技能。我們已經看到了許多解決這方面的需求的新產品,包括Cloudera Impala和微軟Polybase。事實上,今天已經存在的一些功能,使其更容易在正確的時間用最好的工具集訪問正確的資料。
預測5:重量級廠商,如甲骨文和IBM,將會大資料市場進行收購
在過去一年,隨著大資料市場的成熟,大型組織已經接受了大資料。我們預計,一些缺乏獨特的技術能力或專業知識的廠商將會在2013年被收購。兩個明顯的重 量級廠商是甲骨文和IBM——它們已經在資料管理領域構建了多樣化的產品。但更應該看到,產品上市時間是企業獲得更強大的立足點的關鍵。
聚光燈下的大資料
隨著越來越需要利用大資料擴大自身競爭優勢,以及創新產品的興起,會改變企業儲存、管理和分析他們的最重要的資產——資料。使企業找到一個更有效和更符合 成本效益的管理PB級別的資料環境的方式。在接下來的12個月裡,資料管理將會是關注的焦點,因為它是每個公司都要面對的問題。