阿里雲重磅開源實時計算平臺,挑戰計算領域的“珠峰”
資訊爆炸的時代,智慧推薦已經被應用到各類網際網路產品中,但為千萬級甚至億級規模的使用者實時做精準的推薦難度極高。今年阿里雙十一的第1分鐘,數千萬人同時湧進天貓,點開APP的一瞬間,心儀的寶貝就已經出現在螢幕上,這種一秒都沒延遲的體驗來自阿里雲的“計算王牌”——實時計算平臺Blink。
1月28日,阿里雲正式宣佈,將這一技術開源,要讓所有計算線上、實時,幫助人類追趕時間。
Blink是一項典型的“傳火於薪”開源技術,傳承自Flink開源框架,後者最早適用於小流量網際網路場景的資料處理。
由於看好實時計算,阿里率先對Flink進行改造,並將Flink的計算能力推向巔峰,推出內部版Blink,將計算延遲降低到人類無法感知的毫秒級:瀏覽網頁的時候,你只是眨了一下眼睛,但在淘寶、天貓處理的資訊已經重新整理了17億次。
實時計算到底有多重要?2004年,谷歌開啟了離線計算時代,可以針對海量資料進行定時計算,但隨著電商、金融等行業的發展對大資料計算提出了新的需求,在金融交易場景裡,風控系統如果不能實時觀察每一個賬戶的行為動態,就可能因為1秒的延遲遺漏風險,無法阻斷危險交易,造成消費者損失。但實時計算突破了這一技術瓶頸。
現在,阿里巴巴集團的全部核心業務已經用上Blink。除了技術大考雙11之外,ET城市大腦實時計算著杭州1300個訊號燈路口、4500路影片,保障著交通動脈的通暢;淘寶、天貓每天為數億使用者展現實時的“專屬”頁面。
相信在不久的將來,這項技術一定會被應用到社會的各個場景:工廠裝置的物聯網裝置能實時分析資料、提高生產良品率;物流派送平臺能第一時間下單,把商品及時送到消費者手中;導航軟體時刻緊隨出行軌跡,不再錯過轉彎口……
關於這次開源,Data Artisans(Flink創始公司)的 CTO Stephan Ewen興奮地表示:“阿里巴巴是Flink最大的貢獻者之一,很高興阿里能將內部最佳化的Flink版本開源給社群,讓開發者享受到更先進的計算能力。”
阿里巴巴集團副總裁周靖人說:“我們一直密切關注並積極參與最前沿的計算技術。Flink過去幾年在計算領域獲得了很大成功,阿里、Uber、Netflix等都是Flink的受益者,我們希望透過這次開源進一步服務整個社會。”
在此之前,阿里已經為Flink社群貢獻近20萬行程式碼改動,參與建立了首個Flink中文社群,推動了這項實時計算技術在國內的發展。
原文作者:阿里雲;連結:http://blog.itpub.net/31545808/viewspace-2565020/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- Spark實時計算的開發平臺RCS——阿里流式分析實戰Spark阿里
- 大資料開發實戰:實時資料平臺和流計算大資料
- vivo 實時計算平臺建設實踐
- 開源雲端計算Iaas平臺CloudStack架構Cloud架構
- PaaS雲端計算平臺,雲端計算程式開發
- 量子計算:聰明人的挑戰
- 愛奇藝統一實時計算平臺建設
- 盤點六大開源雲端計算平臺
- 使用開源Grid平臺-GridGain實現網格計算AI
- 聯通實時計算平臺演進與實踐
- 日常節省 30%計算資源:阿里雲實時計算 Flink 自動調優實踐阿里
- 如何降低 Flink 開發和運維成本?阿里雲實時計算平臺建設實踐運維阿里
- 雲端計算簡介+雲端計算建站平臺
- 北鯤雲超算平臺如何成為就生命科學雲端計算領域先行者?
- 開源函式計算平臺 OpenFunction 保姆級入門教程函式Function
- 雲端計算平臺 CartoDB 釋出開源工具 Odyssey.js開源工具JS
- 實時計算助力1688打造「實時挑貨」系統
- 雲端計算有什麼用?雲端計算的應用領域有多大?
- 雲端計算平臺的設計原則
- 開源雲端計算廠商:淺析渠道啟用平臺的打造
- 雲端計算的關鍵特點及挑戰
- 跨平臺全網計算機時間同步計算機
- 雲端計算管理平臺之OpenStack計算服務nova
- 重新審視雲端計算領域的“鼻祖”AWS
- ARM是計算領域重要動態的中心
- 雲端計算平臺概覽
- 大資料“重磅炸彈”:實時計算框架 Flink大資料框架
- Hive實戰—時間滑動視窗計算Hive
- 全國高校計算機能力挑戰賽 Java計算機Java
- 計算資源有限的人如何在深度學習領域成長?深度學習
- vivo AI 計算平臺的 ACK 混合雲實踐AI
- 良心之作,計算機領域必看書籍計算機
- 阿里巴巴開源的 Blink 實時計算框架真香阿里框架
- 什麼是雲端計算領域的 orphaned resources
- Storm 實戰:構建大資料實時計算ORM大資料
- 開源是雲端計算的精神
- 攜程實時計算平臺架構與實踐丨DataPipeline架構API
- 微軟Windows Azure雲端計算平臺微軟Windows