資料質量管理方法有哪些

大資料小知識發表於2022-03-23

  資料質量包含兩個方面:資料自身的質量和資料使用過程標準規範。資料質量管理是一個集方法論、管理、技術和業務為一體,對資料在每個階段裡可能引發的各類資料質量問題進行識別、度量、監控、預警等一系列管理過程,並通過改善和提高組織的管理水平確保資料質量的提升。那麼資料質量管理方法有哪些?

  1、建立質量管控流程和規範

  明確質量管控的角色、職責,建立可執行的工作流程、可量化的工作評估等關於資料質量管控辦法,同時也應具備績效考核、衝突解決與管控方式等。

  2、執行管理工作

  1)資料剖析

  進行已知資料問題的評估,評估的範圍控制在本輪管控的目標範圍內。通過對資料進行剖析,發現資料問題,具體規則又可通過標準或業務調研進行提取。

  2)設計資料質量控制操作程式

  獲得已知資料問題後,就應設計資料質量控制操作程式。主要包括制定質量問題評估方式和整改方式、制定質量報告內容及物件以及制定檢查和監控的頻率及方式。

  3)定義資料質量需求

  根據剖析的質檢規則和控制操作程式,對資料質量需求進行定義。

  4)確定資料質量水平

  資料質量需求定義完畢之後,我們就需要確定在此需求下,目前資料質量的水平處於什麼位置。明確反應質量水平的並最直觀的就是錯誤資料的詳情情況。

  5)管理資料質量問題

  問題找到後,針對根據不同的質量問題,進行不同的質量整改方案。比如:源頭修改、補錄、技術修復以及遺留問題管控等。

  3、檢查資料質量

  首先確定整改質量,對處理後的資料進行再次質檢,出具資料質量的報告;然後,對比處理前後效果,總結改進措施;最後,檢查資料質量是否合格,分析不合格原因並下一輪管控中進行技術上或者操作程式上的改進。

  4、監控資料質量,控制管理程式和績效

  根據既定的操作程式,對質量管控過程中各個環節參與者進行績效評估。還可以根據不同時期的重點制定不同的評分標準,有針對性的進行評價和管控,如整改初期資料缺失嚴重,則可對完整性規則權重調大,以期更快看到成效或者達到更好的效果。

  資料質量管理方法有哪些.中琛魔方大資料平臺表示資料質量管控在資料治理體系中佔據了十分重要的地位,是看見實質成效最快的一環,也是資料治理過程中的重要一環,億信華辰睿治智慧資料治理平臺,是一款融合資料治理十大產品模組,覆蓋資料全生命週期管理的應用平臺,其中也包括了資料質量模組,可幫助政企有效提升資料質量,挖掘資料價值。


來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/69936596/viewspace-2883503/,如需轉載,請註明出處,否則將追究法律責任。

相關文章