多智時代,大資料發展趨勢預測

duozhishidai發表於2019-04-09

1、結合智慧計算的大資料分析成為熱點

大資料與神經計算、深度學習、語義計算以及人工智慧其他相關技術結合,成為大資料分析領域的熱點。大資料分析的核心是從資料中獲取價值,價值體現在從大資料中獲取更準確、更深層次的知識,而非對資料的簡單統計分析。要達到這一目標,需要提升對資料的認知計算能力,讓計算系統具備對資料的理解、推理、發現和決策能力,其背後的核心技術就是人工智慧。近年來,人工智慧的研究和應用又掀起新高潮,這一方面得益於計算機硬體效能的突破,另一方面則依靠以雲端計算、大資料為代表的計算技術的快速發展,使得資訊處理速度和質量大為提高,能夠快速、並行處理海量資料。

2、資料科學帶動多學科融合,但是資料科學作為新興的學科,其學科基礎問題體系尚不明朗,資料科學自身的發展尚未成體系

在大資料時代,許多學科表面上看來研究的方向大不相同,但是從資料的視角來看,其實是相通的。隨著社會的數字化程度逐步加深,越來越來多的學科在資料層面趨於一致。可以採用相似的思想來進行的統一的研究。資料科學作為一個與大資料相關的新興學科出現,真正支撐大資料發展的學科跨越還沒有出現。針對大資料處理的理論研究上,新型的概率和統計模型將是主要的研究工具,學科基礎理論的突破還難以在2015年出現。

3、與行業資料結合,實現跨領域應用

跨學科領域交叉的資料融合分析與應用將成為今後大資料分析應用發展的重大趨勢。大資料技術發展的目標是應用落地,因此大資料研究不能僅僅侷限於計算技術本身。

由於現有的大資料平臺易用性差,而垂直應用行業的資料分析又涉及到領域專家知識和領域建模,目前在大資料行業分析應用與通用的大資料技術之間存在很大的鴻溝,缺少相互的交叉融合。因此,迫切需要進行跨學科和跨領域的大資料技術和應用研究,促進和推動大資料在典型和重大行業中的應用和落地。

4、與“物雲移社”融合,產生綜合價值

大資料將與物聯網、雲端計算、移動互聯、社會計算、等熱點技術領域相互交叉融合,產生很多綜合性應用。近年來,計算機和資訊科技發展的趨勢是,前端更前伸,後端更強大。物聯網與移動計算加強了與物理世界和人的融合,大資料和雲端計算加強了後端的資料儲存管理和計算能力。未來,這幾個熱點技術領域將相互交叉融合,產生很多綜合性應用。

5、大資料多樣化處理模式與軟硬體基礎設施逐步夯實

記憶體計算將繼續成為提高大資料處理效能的主要手段。以Spark為代表的記憶體計算逐步走向商用,並與Hadoop融合共存。專為大資料處理優化的系統和硬體出現。由於大資料系統在計算、儲存、快取記憶體方面的需求不平衡,傳統伺服器與儲存已經不適合構建高可靠和高價效比的大資料處理系統。大資料處理多樣化模式並存融合,一體化融合的大資料處理平臺逐漸成為趨勢。

6、大資料安全和隱私

這是第三年關於大資料熱點問題趨勢的預測,每一年都有關於大資料安全和隱私問題,這反映專家和使用者的一種期盼、理解和關注度。但是在大資料的安全和隱私保護方面,從技術層面來看沒有取得較大的進步,仍存在一定的問題的,因此大資料的安全持續令人擔憂。

7、新的計算模式將取得突破

近年來,深度學習引起國內不少人士的關注,但是我們發現一個很有意思的現象,就是專家和工業界的人士更關注眾包技術。

8、各種視覺化技術和工具提升大資料分析

進行分析之前,需要對資料進行探索式地考察。在此過程中,視覺化將發揮很大的作用。對大資料進行分析以後,為了方便使用者理解結果,也需要把結果展示出來。

9、大資料技術課程體系建設和人才培養是需要高度關注的問題

大資料技術的快速發展和行業應用需求的快速增長,使得目前技術市場上掌握大資料技術的人才嚴重短缺。因此,政府、高等院校和科研院所將加快建立大資料技術人才教育和培養體系,發展資料科學和工程專業,梳理和構建跨學科和領域交叉的大資料課程體系,融合計算機、數學分析統計、應用相關的學科,推動交叉學科資料分析技術的發展以及人才的培養。

10、開源系統將成為大資料領域的主流技術和系統選擇

以Hadoop為代表的開源技術拉開了大資料技術的序幕,大資料應用的發展又促進了開源技術的進一步發展。開源技術的發展降低了資料處理的成本,引領了大資料生態系統的蓬勃發展,同時也給傳統資料庫廠商帶來了挑戰。據統計,目前有超過150種開源大資料平臺,這個數字還在增長中。

程學旗指出,對2015年的大資料發展趨勢預測的特點可以總結為四個詞:融合、跨界、基礎、突破。基本體現在學科、技術、系統和應用方面的融合,以及在不同學科不同行業跨界,前面五個問題涉及相關的現象。

同時,他還呼籲在大資料技術基礎的夯實以及技術上的突破,這個基礎包括開源軟體的選擇,以及其他一些單向的調研,比如相關的應用。

最後可以看到,我國大資料的最主要推動力還是來自BAT這樣的大型網際網路公司,這是投票的結果,政府和科研高校不是那麼樂觀。我們希望一個眾籌模式推動大資料發展,也希望科研企業、創業企業和小機構一起推動,這樣才能百花齊放,實現跨越式發展。

人工智慧、大資料、雲端計算和物聯網的未來發展值得重視,均為前沿產業,多智時代專注於人工智慧和大資料的入門和科譜,在此為你推薦幾篇優質好文:
大資料時代,主要需要什麼型別的人才?
http://www.duozhishidai.com/article-1554-1.html
對於大資料開發的學習,最經典的學習路線是什麼?
http://www.duozhishidai.com/article-1544-1.html
大資料在各行業的應用和趨勢
http://www.duozhishidai.com/article-477-1.html


多智時代-人工智慧大資料學習入門網站|人工智慧、大資料、物聯網雲端計算的學習交流網站

多智時代-人工智慧大資料學習入門網站|人工智慧、大資料、雲端計算、物聯網的學習服務的好平臺

相關文章