資料治理：管理資料資產的最佳實踐框架

資料治理定義了角色、責任和流程，以確保整個企業對資料資產的責任和所有權。

01、資料治理定義

資料治理是一個用於定義組織內誰對資料資產具有許可權和控制力，以及如何使用這些資料資產的系統。它包括管理和保護資料資產所需的人員、流程和技術。

資料治理研究所將其定義為一個根據商定的模型執行的"一個與資訊相關的決策權利和責任系統"。而該模型描述了誰可以使用哪些資訊，採取什麼行動，以及何時，在什麼情況下，使用什麼方法。

國際資料管理協會(DAMA)將其定義為"對資料管理以及資料和資料相關來源的使用進行規劃，監督和控制"。

02、資料治理與資料管理

儘管資料管理是一個重要的部分，但是它只是資料管理整體學科的一部分。資料治理的內容是和確保資料資產的責任和所有權的角色、責任和流程相關的，而DAMA將資料管理定義為一個總體術語，描述了用於規劃、指定、啟用、建立、獲取、維護、使用、歸檔、檢索、控制和清除資料的過程。

雖然資料管理已成為該學科的常用術語，但它有時還被稱為資料資源管理或企業資訊管理(EIM)。Gartner 將 EIM 描述為一種以提高效率、提高透明度並實現業務洞察力為目的，跨組織和技術邊界構建、描述和管理資訊資產的綜合性學科。

03、資料治理框架

資料治理多被看作支援組織總體資料管理策略的功能。這樣的框架為組織提供了一種收集、管理、保護和儲存資料的整體方法。為了幫助理解框架應該涵蓋的內容，DAMA將資料管理設想為一個輪子，以資料治理為中心，從中輻射出以下10個資料管理知識領域：

·資料構架:作為企業架構的一個組成部分，也是資料和資料相關資源的整體結構

·資料建模和設計：分析、設計、構建、測試和維護

·資料儲存和操作：結構化物理資料資產儲存部署和管理

·資料安全：確保隱私、機密性和適當的訪問

·資料整合和互操作性：採集、提取、轉換、移動、交付、複製、聯合、虛擬化和運營支援

·文件和內容：儲存、保護、索引和啟用對非結構化源中的資料的訪問，並使這些資料可用於與結構化資料的整合和互操作性

·參考和主資料：管理共享資料以減少冗餘，並通過標準化定義和使用資料值來確保更好的資料質量

·資料倉儲和商業智慧 (BI)：管理分析資料的處理，並使人們能夠獲得決策支援資料，以便進行報告和分析

·後設資料：收集、分類、維護、整合、控制、管理和交付後設資料

·資料質量：定義、監控、維護資料完整性和提高資料質量

在制定戰略時，應考慮資料收集、管理、存檔和使用的上述每個方面。

商業應用研究中心(BARC)警告說，這不是一個"大爆炸計劃"。作為一個高度複雜、持續的計劃，資料治理存在參與者隨著時間的推移失去信任和興趣的風險。為了解決這個問題，BARC建議這個計劃可以從可管理或特定於應用程式的原型專案開始，然後根據經驗教訓在整個公司範圍內進行擴充套件。

BARC 建議執行以下步驟：

·定義目標並瞭解收益

·分析當前狀態和增量分析

·派生路線圖

·說服利益相關者和預算專案

·制定和規劃資料治理計劃

·實施資料治理計劃

·監視和控制

04、資料治理的目標

其目的是建立一種方法、一套責任和相對應流程，以規範、整合、保護和儲存企業資料。根據BARC的說法，組織的主要目標應該是：

·將風險降至最低

·建立資料使用的內部規則

·實施合規性要求

·改善內部和外部溝通

·提高資料的價值

·便於上述內容的管理

·降低成本

·通過風險管理和優化幫助確保公司的繼續存在

BARC指出，這些計劃始終跨越企業的戰略，戰術和運營層面，並且必須將其視為持續的迭代過程。

05、資料治理的優勢

大多數公司已經對單個應用程式、業務部門或職能部門進行了某種形式的治理，雖然這些流程和職責是非正式的。作為一種實踐，它是關於對這些過程和責任建立系統的、正式的控制。這樣做可以幫助公司保持響應能力， 特別是當他們發展到一定規模，個人執行跨職能的任務不再有效時。

資料管理的幾個整體好處只有在企業建立系統的資料治理後才能實現。其中一些好處包括：

·更好、更全面的決策支援，這些支援來自整個組織中一致、統一的資料

·為不斷變化的流程和資料制定明確的規則，幫助業務和 IT 變得更加敏捷和可擴充套件

·通過提供中央控制機制，降低資料管理其他領域的成本

·通過重用流程和資料的能力提高效率

·提高對資料質量和資料流程文件的信心

·提高對資料法規的遵從性

06、資料治理原則

根據資料治理研究所的資料，所有成功的資料治理和管理計劃的核心為以下八項原則：

·所有參與者在相互打交道時都必須保持誠信。在討論資料相關決策的驅動因素、限制因素、選項和影響時，他們必須誠實和坦率。

·資料治理和管理流程需要透明度。所有參與者和審計員都必須清楚，如何以及何時將與資料相關的決策和控制引入流程。

·受資料治理約束的相關決策、流程和控制必須是可審計的。它們必須附有文件，以支援基於合規性和運營的審計要求。

·他們必須明確誰對跨職能資料相關的決策、流程和控制負責。

·它必須定義誰對管理活動負責，這些活動是個人貢獻者和資料管理員組的責任。

·必須以一種在業務和技術團隊之間，以及在建立/收集資訊的人、管理資訊的人、使用資訊的人以及引入標準和合規性要求的人之間引入制衡的方式來定義問責制。

·該計劃必須引入並支援企業資料的標準化。

·程式必須支援對參考資料值以及主資料和後設資料的結構/使用進行主動和被動的變更管理活動。

07、資料治理角色

每個企業的資料治理方式不同，但存在一些共同點。

指導委員會

治理計劃涵蓋整個企業，通常從一個由高階管理層組成的指導委員會開始，通常是負責業務線的C級個人或副總裁。《Get Governance：Building World Class Data Governance Programs》一書的作者摩根·聖殿騎士(Morgan Templar)表示，指導委員會成員的責任包括制定具有特定成果的整體治理戰略，支援資料管家的工作，以及讓治理組織對時間表和成果負責。

資料所有者

Templar表示，資料所有者是負責確保特定資料域中的資訊跨系統和業務線進行管理的個人。他們通常是指導委員會的成員，儘管可能不是有表決權的成員。資料所有者負責：

·批准資料詞彙表和其他資料定義

·確保整個企業資訊的準確性

·指導資料質量活動

·審查和批准主資料管理方法、結果和活動

·與其他資料所有者合作解決資料問題

·對資料管理員發現的問題進行二級審查

·向指導委員會提供有關其資料域的軟體解決方案、策略或法規要求的意見

資料專員

資料管理員負責資料的日常管理。Templar說，他們是主題專家(SME)，他們理解並傳達資訊的含義和使用，他們與整個組織中的其他資料管理員合作，作為大多數資料決策的管理機構。資料管理員負責：

·成為其資料領域的中小企業

·識別資料問題並與其他資料專員合作解決這些問題

·擔任資料管家委員會的成員

·就資料政策和委員會活動提出建議、討論和投票

·向資料所有者和資料域內的其他利益干係人報告

·跨職能部門工作，確保其域的資料得到管理和理解

08、資料治理工具

資料治理是一個持續的計劃，而不是一個技術解決方案，但有一些工具可以幫助支援該計劃。適合你企業的工具將取決於你的需求、資料量和預算。根據IT Central Station的說法，一些更受歡迎的解決方案包括：

·Collibra Governance：Collibra 是一個企業範圍的解決方案，可自動執行許多治理和管理任務。它包括策略管理器、資料幫助臺、資料字典和業務詞彙表。

·SAS資料管理：SAS 資料管理基於 SAS 平臺構建，提供用於管理流程的基於角色的 GUI，包括整合的業務詞彙表、SAS 和第三方後設資料管理以及現狀圖的視覺化。

·用於資料治理的 erwin 資料智慧 (DI)：erwin DI結合了資料目錄和資料掃盲的能力，以提供對可用資料資產的認識和訪問。它為這些資料資產的使用提供指導，並確保資料政策和最佳實踐得到遵循。

·Informatica Axon：Informatica Axon是一個用於支援計劃的收集中心和資料市場。主要功能包括配備協作業務詞彙表、視覺化資料脈絡的能力，以及根據業務定義生成資料質量測量標準。

·SAP 資料中心：SAP Data Hub 是一種資料編排解決方案，旨在幫助你發現、優化、豐富和管理資料環境中所有型別的資料、種類和資料量。它可幫助組織為使用者、群體和角色建立安全設定和身份控制策略，並簡化策略管理和安全日誌記錄的最佳做法和過程。

·Alation：Alation 是按源自動為資料編制索引的企業資料目錄。其關鍵功能之一TrustCheck為工作流程提供了實時"護欄"。特別是為了支援自助式分析，TrustCheck將準則和規則附在資料資產上。

·Varonis Data Governance Suite：Varonis的解決方案利用可擴充套件的後設資料框架自動執行資料保護和管理任務，使組織能夠管理資料訪問，檢視每個檔案和電子郵件事件的審計跟蹤，確定不同業務部門的資料所有權，以及查詢和分類敏感資料和文件。

·IBM 資料治理：IBM 資料治理利用機器學習來收集和整理資料資產。整合的資料目錄可幫助企業查詢、整理、分析、準備和共享資料。

09、資料治理認證

資料治理是一個系統，但有一些認證可以幫助您的組織獲得優勢，包括以下內容：

·DAMA 認證資料管理專業人員 (CDMP)

·資料治理和管理專業人員 (DGSP)

·edX 企業資料管理

·SAP 認證應用程式助理 – SAP 主資料治理

作者：Thor Olavsrud

編譯：帆軟資料應用研究院-grace