談談如何構建企業級資料市場啟用資料要素

隨著“資料產品”概念的普及和採用，下一步是建立一個“資料市場”，讓資料生產者可以提供滿足資料消費者需求的產品，並確保資料在企業範圍內的有效利用。本文是我對如何構建企業級資料市場的指導原則的看法。

設定上下文

資料產品是一個越來越受歡迎和採用的創新概念，特別是在資料網格等現代資料架構方法中。資料產品概念的採用正在為資料管理增加價值，包括但不限於：

• 改善資料生產者和資料消費者之間在設計和交付適合用途的資料方面的協作

• 透過使用資料產品而不是資料元素作為資料管理程式的錨點，提高資料治理、後設資料管理和資料質量的有效性

• 透過提高資料管理流程的有效性降低資料管理成本

設定上下文的另一個重要概念是可信資料協議(TDA) ，它是指資料生產者向資料消費者交付資料的資料、條款和條件的規範。TDA 在資料交付時是自主的可自行執行的。資料本身以及 TDA 是資料產品概念的組成部分。

資料產品是一種產品。產品由生產者提供給市場上的消費者。同樣，資料產品應該由資料生產者提供給資料市場中的資料消費者，資料市場作為促進這一過程的平臺。

如何構建資料市場

資料市場支援應從三個角度進行討論：人員、流程(運營模式)和技術。

人員方面包括與資料市場相關的角色和職責。顯然，兩個關鍵角色是資料生產者和資料消費者。在資料生產者方面，我們通常有負責資料產品各個方面的資料所有者和負責資料產品設計(業務上下文)和內容的資料管理員。資料管理員得到資料保管人的支援，資料保管人負責資料產品的技術實施和資料交付的執行。另一方面，資料消費者正在使用資料產品來執行業務操作。他們的職責與業務需求的規範相關，這可以導致建立新的或增強現有資料產品，以及提供有關資料產品的特定目的特徵(語義、全面性、質量)的反饋。

流程/運營模式方面是指資料市場執行的標準和可重複流程的定義和實施。包括但不限於以下流程：建立新資料產品、資料產品審批/釋出工作流程、修改資料產品、執行資料協議(資料產品交付)、請求資料產品交付(資料消費者)、請求資料產品修改、建立資料產品問題、資料產品問題解決工作流程。

技術方面是指支援資料市場運營模式所需的技術工具。它是指支援資料市場運營模式的平臺(可以由一個或多個工具組成)。它應該是支援內容和工作流管理功能的工具組合，以實現資料產品的建立、釋出和“銷售”、資料生產者和資料消費者之間的互動以及執行資料市場活動的工作流管理。

資料市場的一些設計方面

我認為，資料市場應該包含兩類資料產品：

• 開箱即用的資料產品是指由資料生產者定義並提供給多個資料消費者的資料產品。資料傳輸所依據的資料協議的條款和條件對於所有消費者都是相同的

• 按需資料產品是指特定於一個資料生產者和一個資料消費者之間的特定資料協議的資料產品(是特定資料消費者的私有資料產品)。透過按需資料產品，資料消費者可以完全控制資料協議的條款和條件

企業資料市場是資料要素髮揮作用的助推器，是資料資產化和資本化的引擎。只有把資料中臺、資料湖向資料市場轉化，由傳統思維模式向資料驅動模式轉化，由資料儲存向資料應用轉化，由被動開發向主動服務轉化，才能真正啟用資料要素，形成新質資料生產力。