談談如何透過主資料MDM 開啟資料治理之旅

張哥說技術發表於2024-01-15

來源:資料驅動智慧

一個難倒許多組織的問題——如何踏上覆雜的資料治理之旅?

雖然資料管理的許多不同方面都可以作為起點,但本文提出了一個論點,即主資料管理 (MDM) 是組織建立其初始資料治理成熟度的基礎。MDM 實現可以讓你將一組核心資料治理規則彙集在一起,將它們應用於有限但有影響力的範圍,吸取經驗教訓並制定標準,然後將它們擴充套件到組織的其他部分。

談談如何透過主資料MDM 開啟資料治理之旅

從理論上講,任何資料管理能力領域都可以成為資料治理之旅的起點。

從這個角度來看,首先檢查典型 MDM 實現的各個方面,然後將 MDM 實現元件對映到標準資料管理框架。案例研究將用於描述一家領先的保險公司如何使用 MDM 來啟動其整體資料治理之旅。

什麼是 MDM,什麼是 MDM 實施專案的內容

主資料管理 (“MDM”) 是一種功能,可確保跨組織系統、應用程式和流程的關鍵業務實體獲得準確且一致的資料。MDM 對於為主資料屬性(如客戶、產品、供應商或原材料資料)提供單一、可靠的事實來源至關重要。

談談如何透過主資料MDM 開啟資料治理之旅

MDM 實施專案通常涉及以下階段:

  1. 戰略、策略和標準:描述了 MDM 解決方案和流程的預期結果,並闡明瞭如何管理關鍵主資料的規則和期望。

  2. 發現和分析:評估和了解組織內資料的當前狀態,並確定需要管理的主資料實體。

  3. 資料治理框架:定義了資料治理框架,包括資料管理員、資料所有者和資料治理組織的角色和職責,以及將這些角色分配給“真實”的人員和團隊,並動員治理組織。

  4. 資料建模和對映:建立資料模型,用於定義主資料實體與描述它們的屬性之間的關係,並將主資料對映到使用它的系統和應用程式。

  5. 資料整合:透過建立聯結器從源系統中提取資料,將其轉換為符合資料模型,然後將其載入到 MDM 平臺中,將資料整合從多個源構建到 MDM 解決方案中。同樣,源是從 MDM 解決方案中建立的,用於使用程式和用例。

  6. 資料質量管理:定義和執行資料質量規則、計算指標、建立報告以及確定解決資料質量問題的流程。這還可能包括實體解析和相似度分析。

  7. 培訓和變更管理:向利益相關者提供培訓,以確保他們瞭解 MDM 平臺及其在資料治理框架中的角色和職責。建立變更管理流程來管理對平臺或框架的任何更改。

  8. 監控和維護:在此階段,將建立持續改進流程,包括資料質量監控和報告、資料治理審計以及確定改進機會。可以遵循問題管理流程,在觀察到問題時記錄和解決問題。

談談如何透過主資料MDM 開啟資料治理之旅

對映到標準資料管理框架功能

當然,實施 MDM 解決方案並圍繞其實施流程將推動參考和主資料維度的成熟度。但是,在上述典型 MDM 實施程式的 8 個步驟中,也存在與更廣泛的資料管理框架的聯絡。

談談如何透過主資料MDM 開啟資料治理之旅

當然,實施MDM解決方案會直接提高參考和主資料管理維度的成熟度。但是,如果戰略性地使用,它還會提高其他資料管理功能的成熟度。讓我們明確地描述這些聯絡,以確定如何在這些能力領域建立成熟度。

資料戰略

  • 如果MDM解決方案沒有附帶更廣泛的策略來解釋為什麼掌握某些關鍵資料至關重要,那麼它就不會帶來價值。如果資料戰略已經到位,則可以用來加強它,但如果沒有,它實際上可以作為組織的第一個明確的資料戰略。

  • 對於具體的平臺實施,應在程式之前確定用例和消費流程,以確保納入相應的需求。這可以將MDM解決方案變成真正的資料產品,並使資料辦公室能夠開始管理資料產品組合並跟蹤資料驅動的用例以及價值創造!

資料治理

  • 圍繞 MDM 解決方案和掌握的資料,建立了基礎治理,包括透過定義一組策略和標準來概述對 MDM 的一般期望,以及特定的角色和職責。這些可以增強現有的資料策略和標準,或者如果它們尚不存在,則形成第一個版本。

  • 分配對主資料負責的資料或域所有者。可以確定資料管理員,他們被賦予了由資料所有者委派管理資料的責任。這包括確保資料適合用途的責任,並且可以建立更廣泛的資料治理 RACI 矩陣,該矩陣可以在以後擴充套件到非 MDM 領域。因此,可以為主資料引入和定義資料治理角色,從而實現資料所有權和問責制的文化,然後可以在整個組織中擴充套件,從而確保資料治理實踐的一致性。

  • 定義指標是為了跟蹤平臺的執行狀況和使用情況,並跟蹤風險。這些指標可以構成第一組資料治理指標,以後可以擴充套件這些指標。如果還沒有,可以召集一個組織來監控這些指標並解決問題。該組織可以擴充套件或作為新組織的靈感來源,以在以後涵蓋其他資料治理主題,從而推動治理實踐中的關鍵資料成熟度。

資料架構

  • 對於MDM平臺本身,建立了一個解決方案和資料架構。這可以透過一組明確確定的架構標準來告知。可以確定最佳做法是,任何解決方案體系結構都應以適用的資料標準為依據。實際標準本身也可以重複用於其他未來的轉型計劃。

  • 只有當平臺成為跨組織事務使用的可信來源時,MDM 才會帶來價值。這不應該是可選的——如果有掌握的資料,那麼對於任何使用這些資料的人來說,它的消費應該是強制性的。這有助於建立更廣泛的參考資料架構,其中準則、原則、最佳實踐和實施模式可以推動整個組織架構設計的穩健性和一致性,以及供應商和技術的合理化。

  • 對於 MDM 解決方案,它是從哪些源資料引入以及如何使主資料可供下游使用來捕獲的。記錄的資料流和沿襲可以構成捕獲更廣泛組織資料環境的起點。

資料質量

  • MDM 的一個關鍵元件是測量和管理掌握資料的質量。沒有可控的和量化的質量,就不可能有信任,沒有信任,採用就會動搖。圍繞業務規則的識別、可執行資料質量規則的建立以及資料質量指標的編譯而構建的流程對於未來的任何資料質量工作都非常可重用。

  • 如果使用特定工具來測量資料質量,則可以在以後將其部署到其他範圍。同樣,可以輕鬆擴充套件彙總主資料資料質量的儀表板,以包括非 MDM 資料的資料質量指標。

  • 理想情況下,“資料質量源於設計”的概念被嵌入到 MDM 解決方案的架構中。也就是說,資料捕獲、整合和轉換的處理方式是儘可能保證資料質量的。例如,對於國家/地區欄位,只允許在相應的 ISO 標準中顯示選項。這建立了一種模式、最佳實踐,也與任何未來的現代化和轉型工作相關。

  • 將建立一個問題管理流程,以確保掌握資料中的問題得到解決。然後,用於識別、跟蹤和解決資料問題的相應過程可以跨其他資料域進行擴充套件。

建模、設計與後設資料

  • 如上所述,任何 MDM 解決方案都需要一個資料模型,用於定義主資料實體與描述它們的屬性之間的關係,並將主資料對映到使用它的系統和應用程式。為主資料(例如客戶、產品)建立的概念和邏輯模型(以及基礎元模型)可以擴充套件為包括其他域(例如,財務、人力資源、供應鏈、交易)。

  • 作為 MDM 的一部分,可以採用一種技術來設計和捕獲資料模型和後設資料。該技術以及使用它的過程可用於後續解決方案和領域的資料模型。

  • 捕獲的資料模型和後設資料越多,未來範圍的增量工作就越少。例如,如果要為客戶入職流程描述資料元素並捕獲後設資料,如果已經在概念和邏輯級別定義了關鍵客戶資料和相關業務需求,則花費的時間將大大減少。

資料儲存和操作

  • 在 MDM 計劃期間,迫切需要考慮主資料的儲存和操作要求。這種需求推動了資料儲存最佳實踐的實施和資料操作標準的制定。作為其中的一部分,組織將設計和實施最佳資料儲存策略,同時考慮資料量、速度和多樣性等因素,以及對可擴充套件性和彈性的需求。

  • 為 MDM 開發的操作流程包括資料備份、歸檔和恢復流程可以成為其他資料管理領域類似流程的基礎,從而為構建資料儲存和操作的成熟度鋪平道路。

整合和互操作性

  • 從本質上講,MDM 需要整合來自不同來源的資料,從而為整合和互操作性奠定堅實的基礎。為跨不同系統整合、重複資料刪除和同步主資料而設定的過程可以作為未來資料整合計劃的藍圖。

  • 在 MDM 實施過程中建立資料標準、建立通用資料模型並強制實施一致的資料格式,可以為提高系統之間的互操作性奠定基礎。作為 MDM 流程的一部分構建的整合模式和實踐可以在整個組織中重用,從而幫助建立成熟的整合和互操作性實踐。

  • 具體來說,有機會定義一組互操作性標準,例如,使用通用資料模型定義資料,並使用一組選定的 API 和 ETL 技術,這些標準可以在整個組織中更廣泛地採用。

資料倉儲與商業智慧(BI)

  • 實施良好的 MDM 程式可確保輸入資料倉儲的資料乾淨、一致且可靠。它提供了有效報告和分析所需的單一事實來源,從而為可靠的商業智慧戰略奠定了基礎。

  • 在 MDM 過程中建立的資料質量規則、指標和流程可用於維護資料倉儲的完整性。此外,主資料強大的後設資料管理可以推動高效的資料沿襲、影響分析,並提高對資料的理解,以實現 BI 目的。

資料安全

  • 在實施 MDM 計劃時,組織會為資料訪問、修改和刪除建立並實施特定的安全策略。這些策略在整個組織中統一應用,從而可以嚴格控制誰可以訪問或操作主資料。

  • 這為更全面的資料安全框架奠定了基礎。在設定解決方案時,組織可以定義安全形色和職責,並開發用於敏感資料加密、匿名化和假名化的協議,從而為更廣泛的資料安全成熟度構建初始塊。

案例研究:保險公司的 MDM 專案

作為 MDM 如何推動更廣泛的成熟度的實際說明,讓我們考慮一個涉及我有機會與之合作的領先保險公司的案例研究。該公司是其主要市場市場份額排名前三的公司之一,它啟動了一個專案,為其客戶資料實施 MDM 解決方案。

作為該計劃的一部分,我的職責是確保由另一家供應商處理的技術解決方案不僅得到實施,而且在企業內真正投入使用。這包括建立正確的流程、記錄這些流程、建立強大的資料模型、開發資料質量解決方案和儀表板,以及後設資料模型和基本後設資料管理流程。我們還確定並建立了關鍵角色,例如資料所有者、資料管理員和資料質量分析師。

在實際應用方面,本案例中主資料的主要目標消費者是公司的營銷部門,用例包括客戶細分和營銷活動管理。在實施 MDM 之前,由於難以協調來自各種來源的客戶資料,該公司甚至難以實現基本的 360 度客戶檢視。

實施一年後,成功的業務影響是顯而易見的。透過整合且可靠的客戶資料檢視,營銷團隊能夠辨別參與一條業務線的客戶是否也擁有來自另一條業務線的產品。這促進了更深入的、資料驅動的客戶細分方法,取代了以前基於規則的分析。新訪問的資料使預測建模能夠確定“下一個最佳行動”,並允許在更加個人化的層面上啟用營銷活動。

一個意想不到但顯著的好處是改進了對聯絡人資料的管理,例如電子郵件地址、電話號碼和實際地址。透過將來自各種輸入渠道如呼叫中心、實體分支機構或客戶電子郵件的更新整合到 MDM 解決方案中,此資訊的所有使用者都可以訪問最新的詳細資訊。因此,透過書面營銷材料或電話聯絡目標收件人的成功率提高了20%以上。根據該團隊的估計,他們在營銷活動方面的投資回報增加了多達 50%。

小結

MDM 可以作為組織資料治理之旅的強大跳板。它提供了一種全面的方法,可以為關鍵業務實體建立可靠的事實來源,構建強大的資料治理框架,並推動各種資料管理功能的成熟度。透過將給定域的 MDM 作為可管理的範圍,組織可以引入關鍵的資料治理概念,在受控環境中對其進行測試,並逐步在整個組織中擴充套件它們。

來自 “ ITPUB部落格 ” ,連結:https://blog.itpub.net/70024923/viewspace-3003850/,如需轉載,請註明出處,否則將追究法律責任。

相關文章