行業動態 | 每日處理2500萬事務資料的IoT解決方案

DataStax發表於2020-12-21
藉助DataStax Enterprise和其他開源的解決方案,Locstat為它的使用者提供了創新的IoT解決方案,並將資料分析時間由2-3周降至數分鐘內,從而快速生成用於分析的圖資料。不僅如此,現在他們可以支援大資料,可以靈活伸縮,還可以每日分析處理上百萬個資料點。
 

“通過使用DSE,我們建構了一個規則引擎。它不僅可以查詢內部事務資料,還可以將在某個環境中串流的所有感測器資料視覺化,從而為終端使用者提供可以實時瞭解環境情況的資料圖表。另外,我們還能快速儲存和寫入感測器資料。唯一真正可以搞定這些的資料庫就是DataStax Enterprise。”
——Locstat技術長兼管理總裁Ryno Goosen
 

 
一分鐘案例速讀
 
用例
資料庫、資料分析、圖資料庫
 
行業
物聯網IoT/資料分析
 
挑戰
  • 每日增加上百萬條資料和感測器事務
  • 為關鍵的風險管理服務提供實時的圖資料影像(graph imaging)
  • 提供多感測器的資料點的深度分析
 
解決方案
  • 使用DataStax Enterprise (DSE)——一個基於 Apache Cassandra™構建的、為混合雲環境設計的、隨處線上(active everywhere)的資料庫
  • 使用DSE Graph
  • 使用DSE Analytics
 
成果
  • 實時且深入的資料分析
  • 每日分析上百萬條事務
  • 通過零當機時間建構使用者的信任感和系統的可靠性

 


01 挑戰
 
總部位於南非開普敦的Locstat是一家軟體公司。基於圖資料,Locstat建構了AI和事件處理解決方案,從而能夠實現實時分析和資料視覺化。
行業動態 | 每日處理2500萬事務資料的IoT解決方案
 
基於物聯網裝置的感測器資料,這家企業的科技提供了深度分析和預測分析。它所支援的用例包括:
  • 大量的事務監控
  • 實時的串流分析
  • 欺詐監測和預防
  • 客戶360
  • 推薦引擎
  • IoT事件處理
  • 地理空間(Geospatial)分析
 
由於這些用例本身的複雜性,Locstat需要一個能夠支援大規模資料且具備高效能的資料庫。
 
合適的資料庫應該能夠將資料分析的生命週期從2-3周縮短至數分鐘,從而能夠快速生成用於分析的圖。這個合適的資料庫還應該能夠支援大資料,並能在雲環境中快速且可預期地進行伸縮。
 

02 解決方案
 
Locstat選擇了DataStax Enterprise (DSE) 作為他們的資料庫和資料層,並選擇用DSE Graph支援他們的圖資料影像,以及選擇用DSE Analytics支援他們的解決方案。
 
Locstat利用地理空間和實時的規則引擎來設計製造他們的產品和解決方案。他們的客戶包括了行政部門、國防機關、國安機關、礦產行業、金融行業以及零售業。
 
通過使用DSE,他們構建了一個規則引擎。它不僅可以查詢內部事務資料,還可以將在某個環境中串流的所有感測器資料視覺化,從而為終端使用者提供可以實時瞭解環境情況的資料圖表。
 
另外,他們還能快速儲存和寫入感測器資料。“唯一真正可以搞定這些的資料庫就是DataStax Enterprise,”Locstat技術長兼管理總裁Ryno Goosen說,“機器學習是其中非常重要的元件,因為你想要能夠預測性地進行系統維護,尤其是對於你的感測器來說。如果你的感測器出故障了,你也會想了解相關資料中的規律和趨勢。”
 
Locstat非常重視DSE的整合服務和解決方案。
 
“擁有DSE,你就可以遷移到雲環境或私有云,並且向公有云遷移的過程完全沒有任何痛苦,因為你已經有了一個可以用的預配置的解決方案了。”Goosen如是說。
 
Goosen還說:“我們在那些元件的基礎上建構我們自己的產品和解決方案。如果我們還得管理這些元件,那將是一項成本太高的事情。而現在,我們的解決方案在雲上,因為主流的雲服務提供商在這些元件方面的能力很難贏過DSE,這對我們在市場中競爭來說是個極大的優勢。”
 
為了說明這些,Goosen分享了一個用GeoTrellis生成的熱力圖,上面有開普敦國際機場周圍的航班資料,包括了航空器資訊和航跡圖。在這個例子中,這些資料被存在Cassandra中,然後通過Apache Spark推送,並在Cesium這個地理空間的資料互動介面利用GeoTrellis進行視覺化。
 
根據Goosen所說,這個視覺化的解決方案能夠“自動且實時地在應用程式中堆疊航跡圖,並且當你想要看應用程式後臺提供的額外的內容層時,你可以選擇不同的地理空間地圖。”

 
03 成果
 
藉助DataStax Enterprise和其他開源的解決方案,Locstat為它的使用者提供了創新的IoT解決方案。比如一個開著採礦船在海床上提取礦產的海洋礦產公司,Locstat為他們提供地理空間風險管理。
 
Locstat的產品為這家公司提供風險預警區域,關注海上採礦船周圍的其他船隻。如果其他船隻或航行器進入了採礦船的附近區域並達到了一定的閾值而觸發了警報,Locstat的系統便會提供關於這些船隻和航行器的資訊。每日生成的報告則幫助海洋礦產公司追蹤哪些船隻給他們造成了風險。
 
Locstat還為飛行器和無人機監視系統的廠商提供風險管理方案。
 
Locstat還幫助打擊銅線盜竊——通過分析案件報告、遠端感測器、與貧民區的接近程度、公交樞紐以及金屬廢料回收商的位置來預測銅線盜竊的高發地點。三年間,他們幫助了安保公司Amahlo Consulting的一個客戶減少了68%的銅線盜竊。
 
Locstat還為一個金融服務業的客戶提供反欺詐解決方案。他們每日分析超過2500萬條資料事務以及400萬條金融交易記錄。DSE助力Locstat管理大量資料和分析、能夠靈活伸縮,並且能夠擁有零當機的可靠性。
 

相關文章