HP PCS 雲監控大資料解決方案

ξ簫音ξ發表於2013-07-10

      ——把資料從分散統一集中到資料中心

    基於HP分散式平行計算/儲存技術構建的雲監控系統即是通過“雲高清攝像機”及IaaS和PaaS監控系統平臺,根據使用者所需(SaaS)將多路監控資料流傳送給“雲端”,除了提供傳統的監控服務外,還提供了對PB級大資料的高效能IO併發集中儲存、查詢和分析等資料應用服務,從而可以實現更高的非結構化資料管理,解決了監控系統中對於大資料安全、分析和備份等問題,使用者也可以通過任意方式,任意終端按需實現對視訊監控的需要。

      資料驅動手段在一定程度上幫助了監管部門提高了工作效率。傳統的方法是把影象或視訊等資料分散儲存在不同的分資料中心,分中心則是通過NVR、SAN和NAS等裝置進行本地儲存,這樣雖然可以滿足中小型監控系統儲存的需求,但是隨著數字監控技術和資料儲存的廣泛普及,資料開始爆炸式增長,從TB乃至PB級以上的資料量的需求也隨之不斷增加,使得超過了傳統資料平臺的處理能力。同時有些監控業務管理設施、裝備和應用系統等處於單獨、孤立執行狀態,作用比較單一,而且跨資料中心使用這些資料也非常不方便。

傳統的視訊監控架構下面臨多種挑戰:

1、歷史資料顯示,在現有資料儲存方式下,可儲存資料的週期不但會越來越短,同時面臨資料可靠性的風險。需要延長視訊業務資料的儲存週期,以對儘可能長時間的資料進行查詢和分析,併為一線使用者提供資訊支撐服務。

2、除了集中管理資料的需求,還面臨著資料儲存的挑戰。隨著監控業務規模不斷增大,資訊化建設的不斷推進及監控密集度要求的不斷提高,監控點的建設逐年增加,這些不斷增加的監控裝置採集到的資料需要及時完成儲存,高清視訊資料也導致比以往更大。對儲存效能提出了更高的要求。

3、監控資料無法被充分利用的難題。傳統依靠手工方式實現資料查詢和統計分析的效率伴隨資料量的增加變的越來越低下。這些資料對綜合管理存在潛在的價值,可將視訊監控的應用範圍從過去的和目前以事後檢視為主,轉變為事前預警,從監控資料中挖掘出業務風險,為各行各業提供更為有效的業務資訊支援。

4、傳統業務分析解決方案一般採用資料倉儲系統,但這些系統設計用於進行線上交易處理,而不是做分析的工作。它們通常採用資料庫、伺服器和儲存平臺構建而成,缺少處理不斷增加且瞬息萬變的TB級以上資料所需的能力。

      在視訊資料越來越多的情況下,如何做到投入最少的IT資源、提供更高的使用者資料儲存和分析能力?惠普雲監控解決方案即是通過採集這些非結構化資料來源,並將它們匯聚到一起儲存到雲上,幫助使用者思考能用資料做什麼?從中獲取有價值的資料及知識,並有可能在未來提供現在還無法想象的雲服務。
  惠普PCS雲監控系統解決方案架構,如下圖所示。

HP PCS釋出雲監控大資料解決方案
1

  如上圖所示,惠普PCS最新推出的雲監控大資料解決方案即是採用目前業界領先的高效能密集平行計算/儲存架構,並通過HP雲監控分散式平行計算技術和高效能伺服器能夠有效的解決客戶視訊監控資料集中式管理和分析等問題,從而把資料從分散統一集中到資料中心。
  惠普雲監控系統方案可以依託HP SL4000系列分散式平行計算/儲存伺服器及雲監控平臺所提供了強大的資料I/O能力,來實現高吞吐量和高容錯性的海量資料儲存目標。同時能夠實現線性擴充套件,通過叢集中的機器數量增加一倍可以減少約一半的處理時間,或在相同時間內處理兩倍的資料量。
  

HP PCS釋出雲監控大資料解決方案
1

  如上圖所示,通過採用HP雲監控解決方案的NVR裝置可以實現一次多達128路視訊資料的採集,並可以橫向擴充套件至更多路NVR叢集。惠普分散式平行計算儲存雲平臺無縫整合HP ProLiant SL 4500專用大資料伺服器的叢集,可按需實現分散式平行計算能力的擴充。惠普雲端計算管理平臺應用伺服器可以按需配置大資料伺服器熱資料叢集時間段(例如三個月),超過時間段的資料可以“製冷”自動儲存在儲存冷資料叢集中。
  除了以上特點外,惠普PCS雲監控大資料解決方案,還具有以下亮點:
  * 海量資料儲存能力:基於監控視訊資料的特點,在加入異地備份和冗餘容錯的需求下,能夠提供統一集中式資料中心的PB資料級別以上的線上儲存能力。
  * 高效能高併發實時資料讀寫:由於視訊資料監控系統每秒鐘都由上千路乃至萬路以上終端產生海量的資料。如果在效能上不能到達要求,就會產生寫不進查不出等問題,造成系統無法使用。通過雲監控系統能夠在統一的資料中心中實現高效能和高併發的實時資料I/O讀寫,從而能保障多路視訊影象資料同時併發讀寫等問題。
  * 統一接入儲存:系統提供統一接入介面,能將各監控裝置上的視訊資料通過同一介面寫入邏輯上統一的監控資料中心。在查詢時,各操作人員使用的資訊系統也可以通過統一接入介面對資料進行讀取、查詢、統計等工作。
  * 不停機動態擴容:資料中心的資料容量需要隨著業務的發展動態擴充,而在擴充的同時不能造成資料平臺的服務終止。雲監控系統具有在資料中心不停機情況下能夠繼續提供服務的情況下的動態擴充的能力。
  * 工作負載優化及高效性:雲監控平臺可無縫使用HP ProLiant SL 4500業界首款專為大資料而構建的伺服器,能夠為雲監控系統平臺提供平衡的核心/磁碟比率等並行處理應用,配備15塊磁碟的三節點配置,從而能夠為監控視訊大資料工作負載提供有力支援。並提供最高儲存240TB資料(單個42U機櫃安裝9個機箱容量可達2.16PB),通過高密度的高效機箱及HP智慧陣列技術可隨著資料的增加而輕鬆擴充套件。
  * 分散式並行資料統計挖掘:基於資料中心的海量資料做的資料統計和挖掘會需要大量的資料讀寫,所以,雲監控系統資料中心提供了一個分散式的資料統計挖掘框架,使得統計分中心的伺服器上自動並行執行,並將結果進行彙總。
  HP PCS雲監控大資料解決方案融合了惠普桌面虛擬化、伺服器虛擬化、GPU虛擬化技術和分散式平行計算/儲存技術,為使用者提供了一套完整統一的雲監控大資料服務架構及雲端綜合的大資料分析和管理模式。
  瞭解惠普PCS解決方案
  惠普PCS解決方案是成熟的惠普解決方案服務,並且已經過精選,可成功解決客戶 IT 環境內的各個關鍵壓力點。這些服務由專業的惠普顧問提供,並可以充分利用來自全球的最佳實踐資源,通過高度可重複的及互動式的參與來提供價值。
  惠普PCS解決方案旨在幫助您的客戶啟動關鍵 IT 專案,提供多種方法來實現短期目標。這樣,能夠使客戶輕鬆應對關鍵性挑戰、縮短價值實現時間,更加明智地進行基礎設施投資。
  瞭解獲取更多HP PCS方案資訊,加盟HP PCS 解決方案銷售請聯絡: china_pcs@hp.com

相關文章