怎樣畫一張人見人愛的資料治理框架圖?

碼農談IT發表於2023-01-04

今天聽某大學的校長講課,說做學問要嚴謹,雖然我們們幹資料的不是做學問,但很多工作如果不嚴謹一點,的確也是不行的,比如畫一張資料治理體系框架圖。

我理想中的資料治理體系框架圖應該是業務導向、概念清晰、邏輯合理、邊界清晰且能與實踐很好的對映,但當前業界給出的各種資料治理或資料管理框架圖離以上要求還是有些距離。

因此乾脆自己畫了一張,姑且就叫作傅一平的“一體兩翼“資料治理體系框架,具體見下圖。同時我把自己能找到的其它框架圖都列在文後,方便大家借鑑參考。

“一體兩翼”資料治理體系框架包括三大模組:

  • “一體”:就是中間的資料價值流,體現了資料從源端業務流產生,然後歸集進入資料底座,最後再服務資料消費的過程。

  • “左翼”:指資料管理活動(藍色框),資料管理活動實現資料價值流,達成業務目標。

  • ”右翼“:指資料治理活動(黃色框),資料治理活動確保資料能被管理,你可以理解為履行資料領域的政府職能,是對資料管理活動的管理,包括立法職能(定義策略、標準和企業架構)、司法職能(問題管理和升級)和執行職能(保護和服務、管理責任)。

下面針對三個模組詳細介紹:

1、“一體”:資料價值流

主要包括三部分內容:源端系統、資料底座和資料消費。

  • 源端系統:資料起源於業務流及其承載的系統,這裡打破了傳統資料管理架構圖只侷限在OLAP領域的畫法,將OLTP也包括進來,因為資料治理一定是打穿所有業務系統和資料系統的。

很多資料問題要從源頭業務系統去解決(這裡示例了BOMS四個領域的業務流),主資料、參考資料等資料管理活動其實就是為了解決業務系統資料一致性的問題提出來的,它們不是資料湖、資料中臺的產物。

  • 資料底座:包含了資料湖和資料中臺,主要負責資料儲存和資料加工,實現將資料轉化成資訊和知識的目標。

  • 資料消費:包含了精準營銷、精細服務、精益網運、精確管理及對外注智賦能五大部分,當然每個行業各有不同。

2、“左翼”:資料管理活動

資料管理活動是為了交付、控制、保護並提升資料和資訊資產的價值的實踐活動,在參考了DAMA2等基礎上,我拋棄了一些比較技術化的資料管理活動說法,結合自己的理解給出12個資料管理活動,它們滲透於整個資料價值流,一共分成三種型別。

第一類是專門圍繞源端系統開展的資料管理活動,包括資料架構、主資料、參考資料、資料記錄及資料建模,其中資料架構、主資料及參考資料是貫通了多個業務流的,體現了頂層設計和一致性的要求,資料記錄和資料建模是基於領域的業務活動。

第二類是圍繞資料底座開展的資料管理活動,包括資料歸集、資料建模及資料開放,這裡的資料建模更多是數倉建模和資料探勘,強調將資料轉化成資訊和知識。

第三類是全域性性的資料管理管理活動,包括後設資料,資料質量、資料安全、資料評估等等,這些活動屬於保障性資料管理活動,覆蓋整個資料價值流,因此是一通到底。

3、”右翼“:資料治理活動

資料治理即對資料資產管理行使權力、控制和共享決策(規劃、監測和執行)的系列活動,很多人對這個定義還是不太理解,這裡索性把主要的資料治理活動都列出來,分別是戰略管理、政策原則、組織文化、制度規範、監督控制、變革管理、專案推動、問題管理及法規遵從。”右翼“的資料治理活動對”左翼“的資料管理活動施加控制和影響。

有時大家會對後設資料管理是否屬於治理活動產生困惑?這是用詞不嚴謹造成的,從字面上講,後設資料管理既可以理解成後設資料管理活動,也能理解成後設資料治理活動,如果理解成後設資料治理活動,那麼它一定是前面列出的九種治理活動的一種,比如解決後設資料管理的規範化問題,統籌後設資料變革專案等等。

“一體兩翼”資料治理體系框架是當前我能想到的同時體現資料價值流,資料管理活動,資料治理活動三者實體和關係的表達方法,希望能在確保讀得懂的前提下保持一定的嚴謹性,同時澄清一些概念。

下面也列出了DAMA、華為資料之道、資料資產管理實踐白皮書,阿里資料中臺等相關架構圖,大家可以學習比較,”一體兩翼”資料治理框架很多靈感都來自於這些框架。

1、DAMA車輪圖

DAMA車輪圖定義了資料管理知識領域,它將資料治理放在資料管理活動的中心,因為治理是實現功能內部一致性和功能之間平衡所必需的。

2、DMBOK金字塔(Aiken)

大多陣列織在開始管理資料之前都沒有定義完整的資料管理戰略。相反,通常都是在不太理想的條件下朝著這種能力發展,彼得·艾肯(Peter Aiken)的框架中使用DMBOK知識領域來描述演化的四個階段情況。

3、DAMA資料管理依賴關係圖

上面的Aiken的金字塔中描述了資料管理活動演進的路徑,另一種方法是探索它們之間的依賴關係,該框架由蘇伊格恩斯(Sue Geuens)開發。

4、DAMA車輪圖第三替代方案

該方案借鑑了體系架構概念,呈現了DAMA知識領域之間的一組關係。

5、DAMA車輪圖的資料治理強化版

為了確保基本的活動是以規範的方式執行,許多組織以資料治理的形式建立了監督職能,資料治理範圍內的應用活動圍繞著資料管理生命週期內的各項核心活動進行,這就成了另一種形式的DAMA車輪圖,這張圖其實是不錯的,但技術概念太多,對外的解釋成本很高。

6、華為資料之道資料治理體系框架

該框架給我很大的啟示是以業務流的方式體現資料管理活動與業務之間的關係。

7、華為資料之道的資料底座總體框架

這張圖將資料價值流跟資料管理活動結合起來,但遺憾的是沒有體現資料治理的相關活動及關係。

8、資料資產管理實踐白皮書(5.0版)

這張框架圖描述比較簡單,相互之間的關係還不夠清晰。

9、阿里資料中臺架構

網上最多的一張架構圖,體現了資料價值流和資料管理活動,但資料治理基本沒有體現。

來自 “ 與資料同行 ”, 原文作者:傅一平;原文連結:https://mp.weixin.qq.com/s/Nromb5vzumKgcuzRLSRbdg,如有侵權,請聯絡管理員刪除。

相關文章