智慧資料平臺推進智慧城市

OReillyData發表於2016-05-24


640?wx_fmt=jpeg

根據聯合國2014年的報告,全球54%的人口居住在城市,而未來的城市化程式則會進一步將這個數字在2050年提升到66%。這個人口城市化的浪潮已經鼓勵全球的地方和中央政府的領導人來團結起來推進“智慧城市”,一個收集數字化資訊科技的初創專案,設計來讓城市更宜居、更靈活、更可持續發展。


智慧城市依賴於一系列基礎技術,比如感測器、移動計算、社交媒體、高速通訊網路和智慧資料平臺。這些在Strata+Hadoop World大會和我們O’Reilly出版物裡都已經被多次強調。智慧城市技術的早期應用一般都出現在交通、物流、地方政府服務、電力、衛生保健和教育領域。之前Strata+Hadoop World大會的對話中已經描繪了使用機器學習和大資料技術來理解和預測交通流量和擁堵的模式,以及在大規模衛生保健資料平臺上使用可穿戴裝置。


在我們制定2015年Strata+Hadoop World新加坡大會的議題時,我們已經意識到了不少對於新加坡智慧國家專案的興趣。更大範圍內,我們更加註意到亞太地區大規模的資訊基礎設施的投資已經吸引了地方領導人蔘與智慧城市初創專案。對於那些已經熟悉大規模流計算平臺的讀者而言,推進智慧城市的很多關鍵技術應該已經不陌生了。這些技術有:


資料收集和傳輸

在智慧城市裡,物聯網和工業網際網路應用、恰當的測量化和資料收集都依賴於感測器、移動裝置和高速通訊網路。很多的私有化的基礎設施都屬於大型電信公司,並由他們來運維。同樣,很多的早期有趣的應用和平臺也是由電信和網路裝置供應商建立的。


資料處理、儲存和實時報表

正如我之前的一篇文章裡所表述的,分散式計算和硬體的高速發展已經帶來了能夠處理無窮資料和有窮資料工作的高吞吐處理引擎,如雲端計算平臺(AWS、Google、Microsoft等)和由開源工具搭建的私有資料平臺。在這些平臺的最基礎層面上,他們都可以對於海量的資料流來提供近似實時的商業智慧報表業務。

640?wx_fmt=jpeg

智慧的資料應用

不再是使用基本的累計和異常值檢查,先進的機器學習和統計技術的使用已經開啟了創新性實時計算應用(機器與機器間)的大門,這些應用不需要人蔘與決策迴圈的過程。這種應用比較流行的例子一般都包括一些系統,比如為資料中心、建築物和公共空間、製造業(工業網際網路)提供能源的系統。在意識到未來的智慧城市應用將會依賴於分散的資料,包括事件資料(從日誌和時間序列資料中獲得的指標)、非結構化的資料(影象、聲音、文字)和地理位置資訊資料來源,我們已經在Strata+Hadoop World新加坡大會裡設計了一些主題分會,主要關注面向這些資料型別的先進資料分析技術。

智慧城市平臺代表了實時和智慧大資料系統的一些最令人激動和最有影響的應用。這些平臺也會碰到很多同樣的挑戰,就如在商業、工業、人文和政府的應用所碰到的。在Strata+Hadoop World新加坡大會裡,我們期待著能重點介紹那些能驅動我們未來城市的技術和社群的(思想和技術的)融合與碰撞。

相關內容

  • 維文•巴拉克瑞斯南(Vivian Balakrishnan)博士(新加坡政府環境與水資源部長,智慧國家專案部長級負責人)在Strata+Hadoop World新加坡大會上的主題演講。

  • Strata+Hadoop World新加坡大會關於智慧城市、電信、物聯網和實時計算、資料科學與先進資料分析和大資料平臺的主題分會。

  • 近期的一些O’Reilly的資料包告。

  • O’Reilly的比特幣和區塊鏈峰會。其中有很多關於對等網路(peer-to-peer)技術(包括區塊鏈)用於智慧城市的早期應用。


作者:本·羅瑞卡(Ben Lorica)

本· 羅瑞卡是O'Reilly的首席資料科學家和關於資料方面的內容策略主管。在多個領域裡(包括直銷市場、消費者和市場研究、精準廣告、文字挖掘和金融工程),他曾經進行了商業智慧、資料探勘、機器學習和統計分析的工作。他曾效力於投資管理公司、網際網路創業企業和金融服務公司。


長按二維碼識別關注

640?wx_fmt=jpeg



閱讀原文( read more )瀏覽Strata +Hadoop World 會議網站

相關文章