EXCEEDDATA — 工程大資料分析平臺

HirainTeco發表於2019-08-28

隨著大資料時代來臨、無人駕駛和車聯網的快速發展,汽車研發部門需要處理的資料量激增、資料型別不斷擴充套件。相關資料涵蓋車內高頻CAN 資料和車外ADAS 影片非結構化資料、位置地理空間資料、車輛運營資料、使用者CRM 資料、WEB 資料、APP 資料、和MES 資料等。

在此背景下,整車廠研發部門關心的是:如何將企業內部的研發、實驗、測試、生產資料,社會使用者的用車資料,網際網路第三方資料等結合起來,將異構資料和同構資料整合到一起,並在此基礎上,實現業務系統、分析系統和服務系統的一體化;怎樣利用深度的駕駛員行為感知、智慧的車輛預防性維護、與實時的環境狀態互動,透過大資料與機器學習技術,建立面向業務服務與產品持續最佳化的車聯網智慧分析;最終利用資料來為產品研發、生產、銷售、售後提供智慧決策支撐。這些都是整車廠在大資料時代下亟待解決的問題。

針對這一需求,經緯恆潤探索出以EXCEEDDATA 大資料分析平臺為核心的汽車工程大資料整體解決方案。藉助EXCEEDDATA 大資料分析平臺,企業可以整合、處理、分析、以及視覺化海量級別的資料,可實現對原始資料的高效利用,並將原始資料轉化成產品所需的智慧,從而改進業務流程、實現智慧決策的產業升級。

產品介紹

• 先進的技術架構

♦ EXCEEDDATA 採用分散式架構、包含整合處理(ETL)與分析挖掘兩大產品功能體系,共支援超過20 多個企業常見傳統資料庫和大資料來源系統,超過50 多個分析處理演算法、以及超過豐富的視覺化智慧展現庫。使用者可以自主的、靈活的將各種來源的原始資料與分析處理串聯應用,建立科學的資料模型,得出預測結果並配以互動的視覺化智慧,快速高效的將大資料智慧實現至業務應用中。

♦ 平臺包括分散式大資料分析引擎、智慧終端展示、以及API。大資料分析引擎為MPP 架構,建立在開源的Apache Hadoop 與Apache Spark 之上,可簡易的scale-out 擴充套件。在分析引擎的基礎上包含資料來源庫、資料轉換匹配器、資料處理操作庫、機器學習演算法庫、視覺化圖形庫等子模組。智慧終端展示為行業通用的B/S 架構,使用者透過支援跨作業系統和瀏覽器的HTML5/JS 介面與API 來與平臺互動。

• 廣泛的資料型別和儲存格式支援能力

EXCEEDDATA 平臺支援數值、字元、時間、向量、列表等17 種資料型別,還可支援多種Hadoop 資料儲存格式,如HDFS 的檔案儲存格式和Hive 的表儲存格式。為資料分析人員節省大量的資料格式轉換和檔案系統轉移的準備時間。分析員可快速的從既有資料來源中靈活的獲取資料,儘快開展資料分析任務。

• 豐富的演算法模組和直觀的程式設計環境

EXCEEDDATA 平臺提供豐富的機器學習演算法,共六大類函式對資料進行彙總、分析、分類或聚類,並配以靈活的演算法流程引擎和可拉動式介面。業務人員可輕鬆地選擇和組合多個資料來源和演算法模組,快速構建分析流程,對業務進行綜合分析。

機器學習演算法包

• 網路分析型別:Graph Analytics

• 推薦引擎型別:Recommendation Engine

• 時間路徑類別:Time & Path

• 聚類分析類別:Cluster Analytics

• 決策樹分析型別:Decision Tree

• 樸素貝葉斯分析型別:Naïve Bayes

• 統計分析類別:Statistical Analysis

多維度大資料的分析與預測演算法包

• 行為網路演算法, 包括圖譜統計、最短路徑等

• 中英文語言分析演算法,包括TF-IDF、Word2Vec等

• 地理分析演算法

• 分類挖掘:邏輯迴歸、向量機、樸素貝葉斯、決策樹、梯度提升決策樹、隨機森林

• 迴歸預測:線性迴歸、嶺迴歸、套索迴歸、保序迴歸

• 聚類:KMeans 、高斯混合模型

• 關聯推薦:Apriori、FPGrowth、Alternate Least Squares(協同過濾)

• 時間路徑:sessionize、去重、分割槽、路徑(遍歷、順序、起始點)

• 網路地理:最短路徑、方塊分割槽索引、異狀邊際定位

• 統計處理:直方分佈、密度分佈、聚合、排序、過濾等

豐富的資料呈現方式

EXCEEDDATA 平臺提供豐富的資料智慧展現,包括折線圖、柱狀圖、餅圖、散點圖、多拿圖、堆疊圖、平行座標圖等30 多種圖示方式。可幫助業務人員進行多檢視、多層次的分析,挖掘出資料深層次的商業價值,快速發現資料背後的規律。

來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/31536169/viewspace-2655253/,如需轉載,請註明出處,否則將追究法律責任。

相關文章