效率提升50倍,輕鬆處理大資料
阿里雲流計算正式上線——新使用者免費試用一個月
日前,阿里雲宣佈流計算(Aliyun StreamCompute,Powered by Blink)正式釋出商業化版本。阿里雲流計算是執行在阿里雲平臺上的流式大資料分析平臺,提供給使用者在雲上進行流式資料實時化分析工具,實現對網站資料、工業化資料、物聯網資料等各種場合進行實時的資料監控、分析和處理。
流計算典型架構
解決痛點
阿里雲流計算可以提供BlinkSQL協助使用者簡單輕鬆完成流式計算邏輯的處理。同時,受限於SQL程式碼功能有限無法滿足某些特定場景的業務需求,阿里雲流計算提供全功能的UDF函式,幫助使用者完成業務定製化的資料處理邏輯。在流資料分析領域使用者直接使用BlinkSQL+UDF即可完成大部分流式資料分析處理邏輯,目前的流計算更擅長於做流式資料分析、統計、處理。主要解決了使用者的三大痛點:
1.流式資料的及時性
資料的業務價值隨著時間的流失而迅速降低,因此在資料發生後必須儘快對其進行計算和處理。而傳統的大資料處理模式對於資料加工均遵循傳統日清日畢模式,即以小時甚至以天為計算週期對當前資料進行累計並處理,顯然這類處理方式無法滿足資料實時計算的需求。在諸如實時大資料分析、風控預警、實時預測、金融交易等諸多業務場景領域,批量(或者說離線)處理對於上述對於資料處理時延要求苛刻的應用領域而言是完全無法勝任其業務需求的。而流計算作為一類針對流資料的實時計算模型,可有效地縮短全鏈路資料流時延、實時化計算邏輯、平攤計算成本,最終有效滿足實時處理大資料的業務需求。
2.一站式的流式資料處理
不同於開源或者自建的流式處理服務,阿里雲流計算是完全託管的流式計算引擎,阿里雲可針對流資料執行查詢,無需預置或管理任何基礎設施,使用者可以享受一鍵啟用的流式資料服務能力。阿里雲流計算天然整合資料開發、資料運維、監控預警等服務,方便使用者最小成本試用和遷移流式計算產品。
3.SQL化的流式分析
支援標準SQL(產品名稱為:BlinkSQL),提供內建的字串處理、時間、統計等各類計算函式,替換業界低效且複雜的Flink開發,讓更多的BI人員、運營人員通過簡單的BlinkSQL可以完成實時化大資料分析和處理,讓實時大資料處理普適化、平民化。
同時,實現實時的資料監控/分析。比如BI人員可以看到自己網站實時的訪客資料變化,購買情況,交易額波動等,不需要一段時間後才能做統計和分析。之前150人/月的工作,現在只需3個人/月就可以輕鬆解決,效率提升了50倍。
應用場景
流計算擅長解決的幾個領域的應用場景包括,實時的網路點選PV、UV統計;統計交通卡口的平均5分鐘通過車流量;水利大壩的壓力資料統計和展現;網路支付涉及金融盜竊固定行為規則的告警等。特別適合BI人員、大資料開發人員等使用者。
據瞭解,阿里雲流計算脫胎於阿里集團內部雙十一實時大屏業務,歷經長期摸索和發展,將阿里集團本身沉澱多年的流計算產品、架構、業務能夠以雲產品的方式對外提供服務,使用者可以完全享受到阿里集團最新最前沿的計算引擎能力,業務上可規避阿里集團多年在流式大資料的試錯和教訓,更快、更輕鬆地實時化大資料處理流程,助力業務發展。
使用者案例
經過多年沉澱,目前,阿里雲流計算產品已具有國際領先的產品優勢,在吞吐/時延、SQL支援、開發體驗、視窗支援、亂序支援、上下游對接等多方面都優於其他雲廠商的相關產品。相對spark、storm等,阿里雲流計算人力成本低,開發運維更加便利,還可以無縫對接阿里雲資料儲存。使用者可以充分利用阿里雲流計算提供的產品優勢,方便快捷的解決自身業務實時化大資料分析的問題。
使用說明
流計算的基本計量單位為CU(Compute Unit,即計算資源),一個CU對應於流計算底層系統是一個CPU的計算能力。流計算底層使用虛擬化技術進行資源隔離,保證一個基本的CU消費且最大消費僅能為一個CPU的計算能力。產品的具體使用也十分方便,具體來說有以下幾步:
此外,阿里雲流計算近期上線新使用者可免費試用一個月的活動。其次,使用者購買門檻降至2個CU。使用者可以在阿里雲流計算頁面(https://data.aliyun.com/product/sc)申請免費試用。
相關文章
- 掌握BeanShell,輕鬆處理jmeter中的資料BeanJMeter
- 60萬行的Excel資料,Python輕鬆處理ExcelPython
- 面對眾多資料難以下手?資料預處理讓你輕輕鬆鬆“超車”
- BI與SaaS碰撞,讓資料處理更加輕鬆(下)
- 在`Laravel`中使用`cursor`來查詢並處理資料 (輕鬆處理千萬級的資料)Laravel
- 在Laravel中使用cursor來查詢並處理資料 (輕鬆處理千萬級的資料)Laravel
- NLPIR語義挖掘技術提升大資料處理效果大資料
- 精準、智慧、高效:AI平臺如何提升醫療資料處理效率50%AI
- 最佳化資料處理效率,解讀 EasyMR 大資料元件升級大資料元件
- Java記憶體對映,上G大檔案輕鬆處理Java記憶體
- 提升程式碼管理效率,Cornerstone 4 for Mac助您輕鬆駕馭版本控制Mac
- 提升專案管理效率,輕鬆應對挑戰——OmniPlan Pro 4 for Mac專案管理Mac
- Pandas缺失值處理 | 輕鬆玩轉Pandas(3)
- 如何在Java中輕鬆處理Emoji Unicode - UdayakumarJavaUnicode
- 輕鬆處理增值稅發票資料的利器——增值稅發票識別 APIAPI
- 桌面輕量級資料處理指令碼指令碼
- 結合 AOP 輕鬆處理事件釋出處理日誌事件
- 大資料常用處理框架大資料框架
- Topaz Video AI: 讓你輕鬆成為影片處理大師 mac/win版IDEAIMac
- 一文輕鬆搞定批處理框架 Spring Batch框架SpringBAT
- 用《Excel》玩轉格式,輕鬆分析龐大資料!Excel大資料
- C++ 異常處理機制詳解:輕鬆掌握異常處理技巧C++
- 智慧標註平臺將資料處理效率提升十倍以上!資料精準度最高可達99%
- 輕鬆篡改WebSocket資料包Web
- java大資料處理:如何使用Java技術實現高效的大資料處理Java大資料
- Excel技巧提升:輕鬆玩轉格式Excel
- 大資料處理的基本流程大資料
- 剖析大資料平臺的資料處理大資料
- 如何提升SQLServer Delete資料的效率SQLServerdelete
- Topaz Video AI: 讓你輕鬆成為影片處理大師 mac/win啟用版IDEAIMac
- 【下一代物件專題】星辰天合OCPF,輕鬆玩轉各類資料處理物件
- EMQX Cloud 更新:更易用的規則引擎,三步輕鬆實現資料處理轉存MQCloud
- 大資料學習之Hadoop如何高效處理大資料大資料Hadoop
- Python資料處理(二):處理 Excel 資料PythonExcel
- Excel技巧提升:輕鬆玩轉神奇公式Excel公式
- 大資料處理平臺都有哪些?大資料
- 大資料處理系統有哪些大資料
- 十年期貨股票行情資料輕鬆處理——TDengine在同心源基金的應用