怎樣畫一張人見人愛的資料治理框架圖?
今天聽某大學的校長講課,說做學問要嚴謹,雖然我們們幹資料的不是做學問,但很多工作如果不嚴謹一點,的確也是不行的,比如畫一張資料治理體系框架圖。
我理想中的資料治理體系框架圖應該是業務導向、概念清晰、邏輯合理、邊界清晰且能與實踐很好的對映,但當前業界給出的各種資料治理或資料管理框架圖離以上要求還是有些距離。
因此乾脆自己畫了一張,姑且就叫作傅一平的“一體兩翼“資料治理體系框架,具體見下圖。同時我把自己能找到的其它框架圖都列在文後,方便大家借鑑參考。
“一體兩翼”資料治理體系框架包括三大模組:
-
“一體”:就是中間的資料價值流,體現了資料從源端業務流產生,然後歸集進入資料底座,最後再服務資料消費的過程。
-
“左翼”:指資料管理活動(藍色框),資料管理活動實現資料價值流,達成業務目標。
-
”右翼“:指資料治理活動(黃色框),資料治理活動確保資料能被管理,你可以理解為履行資料領域的政府職能,是對資料管理活動的管理,包括立法職能(定義策略、標準和企業架構)、司法職能(問題管理和升級)和執行職能(保護和服務、管理責任)。
下面針對三個模組詳細介紹:
1、“一體”:資料價值流
主要包括三部分內容:源端系統、資料底座和資料消費。
-
源端系統:資料起源於業務流及其承載的系統,這裡打破了傳統資料管理架構圖只侷限在OLAP領域的畫法,將OLTP也包括進來,因為資料治理一定是打穿所有業務系統和資料系統的。
很多資料問題要從源頭業務系統去解決(這裡示例了BOMS四個領域的業務流),主資料、參考資料等資料管理活動其實就是為了解決業務系統資料一致性的問題提出來的,它們不是資料湖、資料中臺的產物。
-
資料底座:包含了資料湖和資料中臺,主要負責資料儲存和資料加工,實現將資料轉化成資訊和知識的目標。
-
資料消費:包含了精準營銷、精細服務、精益網運、精確管理及對外注智賦能五大部分,當然每個行業各有不同。
2、“左翼”:資料管理活動
資料管理活動是為了交付、控制、保護並提升資料和資訊資產的價值的實踐活動,在參考了DAMA2等基礎上,我拋棄了一些比較技術化的資料管理活動說法,結合自己的理解給出12個資料管理活動,它們滲透於整個資料價值流,一共分成三種型別。
第一類是專門圍繞源端系統開展的資料管理活動,包括資料架構、主資料、參考資料、資料記錄及資料建模,其中資料架構、主資料及參考資料是貫通了多個業務流的,體現了頂層設計和一致性的要求,資料記錄和資料建模是基於領域的業務活動。
第二類是圍繞資料底座開展的資料管理活動,包括資料歸集、資料建模及資料開放,這裡的資料建模更多是數倉建模和資料探勘,強調將資料轉化成資訊和知識。
第三類是全域性性的資料管理管理活動,包括後設資料,資料質量、資料安全、資料評估等等,這些活動屬於保障性資料管理活動,覆蓋整個資料價值流,因此是一通到底。
3、”右翼“:資料治理活動
資料治理即對資料資產管理行使權力、控制和共享決策(規劃、監測和執行)的系列活動,很多人對這個定義還是不太理解,這裡索性把主要的資料治理活動都列出來,分別是戰略管理、政策原則、組織文化、制度規範、監督控制、變革管理、專案推動、問題管理及法規遵從。”右翼“的資料治理活動對”左翼“的資料管理活動施加控制和影響。
有時大家會對後設資料管理是否屬於治理活動產生困惑?這是用詞不嚴謹造成的,從字面上講,後設資料管理既可以理解成後設資料管理活動,也能理解成後設資料治理活動,如果理解成後設資料治理活動,那麼它一定是前面列出的九種治理活動的一種,比如解決後設資料管理的規範化問題,統籌後設資料變革專案等等。
“一體兩翼”資料治理體系框架是當前我能想到的同時體現資料價值流,資料管理活動,資料治理活動三者實體和關係的表達方法,希望能在確保讀得懂的前提下保持一定的嚴謹性,同時澄清一些概念。
下面也列出了DAMA、華為資料之道、資料資產管理實踐白皮書,阿里資料中臺等相關架構圖,大家可以學習比較,”一體兩翼”資料治理框架很多靈感都來自於這些框架。
1、DAMA車輪圖
DAMA車輪圖定義了資料管理知識領域,它將資料治理放在資料管理活動的中心,因為治理是實現功能內部一致性和功能之間平衡所必需的。
2、DMBOK金字塔(Aiken)
大多陣列織在開始管理資料之前都沒有定義完整的資料管理戰略。相反,通常都是在不太理想的條件下朝著這種能力發展,彼得·艾肯(Peter Aiken)的框架中使用DMBOK知識領域來描述演化的四個階段情況。
3、DAMA資料管理依賴關係圖
上面的Aiken的金字塔中描述了資料管理活動演進的路徑,另一種方法是探索它們之間的依賴關係,該框架由蘇伊格恩斯(Sue Geuens)開發。
4、DAMA車輪圖第三替代方案
該方案借鑑了體系架構概念,呈現了DAMA知識領域之間的一組關係。
5、DAMA車輪圖的資料治理強化版
為了確保基本的活動是以規範的方式執行,許多組織以資料治理的形式建立了監督職能,資料治理範圍內的應用活動圍繞著資料管理生命週期內的各項核心活動進行,這就成了另一種形式的DAMA車輪圖,這張圖其實是不錯的,但技術概念太多,對外的解釋成本很高。
6、華為資料之道資料治理體系框架
該框架給我很大的啟示是以業務流的方式體現資料管理活動與業務之間的關係。
7、華為資料之道的資料底座總體框架
這張圖將資料價值流跟資料管理活動結合起來,但遺憾的是沒有體現資料治理的相關活動及關係。
8、資料資產管理實踐白皮書(5.0版)
這張框架圖描述比較簡單,相互之間的關係還不夠清晰。
9、阿里資料中臺架構
網上最多的一張架構圖,體現了資料價值流和資料管理活動,但資料治理基本沒有體現。
來自 “ 與資料同行 ”, 原文作者:傅一平;原文連結:https://mp.weixin.qq.com/s/Nromb5vzumKgcuzRLSRbdg,如有侵權,請聯絡管理員刪除。
相關文章
- 人體肌肉怎麼畫?怎樣才能畫好人體肌肉?
- CIO們眼中的資料治理是怎樣的?
- 原畫人場景原畫教程,畫場景的思路是怎麼樣的?
- HDU 2033 : 人見人愛A+B (C語言)C語言
- 談一談常見的資料治理怪象
- 人盡皆知,但並非人見人愛的啤酒你知道嗎?
- 組長問我幾天能開發一個人見人愛的百萬量級Android相機,我是這樣回答的...Android
- 18 張圖,一文了解 8 種常見的資料結構資料結構
- 共享資料夾怎麼在另一個電腦檢視 怎樣查詢別人共享的資料夾
- [譯] 一張圖弄明白 Vuex 裡該存放什麼樣的資料Vue
- 資料治理是一個怎樣的體系化的過程?_光點科技
- 四張視覺化大資料圖,完美詮釋杭州人的"小傲嬌"視覺化大資料
- 一張圖學習常見this的指向
- 一張圖:資料分析師的完整資料視覺化指南圖視覺化
- 愛奇藝的雲上資料治理實踐
- 資料治理:管理資料資產的最佳實踐框架框架
- 資料治理常見的誤區有哪些
- 從技術方面來看:資料治理怎樣進行?
- 揭秘資料治理系統的資料流程圖流程圖
- 一張圖認識天下資料庫資料庫
- 《怪物獵人》是怎樣誕生的
- 資料資產怎麼治理
- 一張照片獲得3D人體資訊,雲從科技提出新型DenseBody框架3D框架
- 如何畫出一張合格的技術架構圖?架構
- 關於ChatGPT的一些資訊,我畫了一張思維導圖ChatGPT
- 拒絕工具人,資料人如何掌握資料化的一些思維模式?模式
- 腳踏AJ和椰子鞋的,是一幫怎樣的潮人?
- 怎樣準備一場面試:候選人篇面試
- 人員組織架構圖怎麼畫有沒有詳細的圖文介紹?架構
- Github 1.9K Star的資料治理框架-AmundsenGithub框架
- CDGA|資料治理落地化,需要強化人員資料合規意識與能力
- 無人駕駛需要怎樣的感測器?
- 電話機器人的使用效果怎麼樣?機器人
- 怎樣有效的治理殭屍網路?
- 失明是一種怎樣的體驗——見
- 掌握資料治理的藝術:制定資料戰略藍圖
- 這是我見過的把開發人員學習路線總結的最清晰的四張圖了
- 智慧電話機器人怎麼樣?機器人