資料治理的十二條技術原則
企業開展資料治理過程,有哪些技術原則可供指導資料治理工作?本文給出了十二條技術原則建議,供大家參考。
原則一:視覺化管理企業資產
比如,透過使用儀表板展示企業的資料資產情況,包括資料來源、儲存位置、資料質量等,方便呢管理者快速瞭解和監控資料資產狀態。又比如,利用資料目錄工具視覺化展示不同資料集的結構和關係,幫助使用者理解和發現資料資源。
原則二:自動獲取資料資訊
利用自動化工具和流程,從各種來源獲取資料。比如,設立定時任務,自動從各個業務系統和資料庫中提取資料,並將其載入到資料倉儲或資料湖中。
原則三:大資料服務智慧化
將大資料服務(如儲存、處理、分析等)智慧化,以提高效率,支援更高階的資料治理需求。
原則四:資料管理能力服務化
將資料管理能力以服務的形式提供,使其更易於部署和維護。比如,提供資料質量管理平臺,讓使用者可以透過自助服務的方式進行資料質量評估、資料清洗等操作。
原則五:從需求開始控制資料質量
從需求開始,就要制定相應的資料質量控制策略和流程,確保資料符合預期的質量標準。比如,對業務部門提出需求開始,就要制定相應的資料質量標準和指標。
原則六:在整合點檢查資料質量
在資料整合的關鍵節點上檢查資料質量,及時發現和解決資料質量問題。
原則七:持續積累檢核規則
持續積累並更新資料質量檢核規則,以適應不斷變化的資料環境和需求。比如,在資料整合的關鍵節點(如ETL過程中)設定資料質量檢查點,對資料進行質量評估和驗證,及時發現和解決資料質量問題。
原則八:自動化質量評分
利用自動化工具和演算法,對資料質量進行評分和監控,及時發現和處理質量異常。比如,基於預先設定的資料質量規則和指標,自動對資料進行質量評分,並生成質量報告和警告資訊。甚至可以基於資料質量評分結果反饋,自動觸發資料質量改進流程,對資料進行修復等。
原則九:管理核心資料定義
管理好核心資料的定義,確保不同系統和業務部門對核心資料的理解、使用一致。
原則十:為資料標準新增技術屬性
為資料標準新增技術屬性,使其更容易實施和管理,並支援資料治理的自動化流程。
原則十一:識別與管理業務語義
識別和管理業務術語和語義,確保不同業務部門之間的資料交換和理解一致性。
原則十二:關聯業務語義與技術
將業務語義與技術實現相互關聯,確保業務需求和技術實現之間的有效對應和溝通。
來自 “ 半山裡人 ”, 原文作者:level;原文連結:https://mp.weixin.qq.com/s/XN0ZuMFUuCDrubZZRL2LXQ,如有侵權,請聯絡管理員刪除。
相關文章
- 資料治理的目標和原則
- 企業主資料治理的“五化”原則
- 資料治理:資料整合的關鍵技術
- 騰訊資料治理技術實踐
- CDGA認證|資料治理和數字化的12項原則
- 做技術的「五比一」原則
- 美團技術leader:寫給工程師的十條精進原則工程師
- 架構師進階,微服務設計與治理的16條常用原則架構微服務
- 幾條Oracle資料庫開發的原則歸納(上)Oracle資料庫
- 幾條Oracle資料庫開發的原則歸納(下)Oracle資料庫
- [技術問題]MySQL資料庫的“十宗罪”的治理MySql資料庫
- 技術管理的6個關鍵原則
- 股票技術分析的操作原則(轉載)
- 3.3 資料整理的原則
- 思考、學習新技術的原則和方式
- 從技術方面來說,資料治理怎麼進行?
- 從技術方面來看:資料治理怎樣進行?
- 製作資訊圖時要遵循的10條原則——資料資訊圖
- 遊戲設計的11條原則遊戲設計
- Salesforce架構的10條原則Salesforce架構
- 資料表的設計原則
- 資料庫建立索引的原則資料庫索引
- 軟體開發的七條原則
- 防禦 XSS 的七條原則
- 3條招聘原則成就亞馬遜亞馬遜
- OO幾條設計原則
- 有關資料驗證的原則
- 資料庫索引的設計原則資料庫索引
- 掌握資料治理的藝術:制定資料戰略藍圖
- 理論+實踐解析“IT治理”之模式與原則模式
- 談談構建有效資料治理策略的10條建議
- 如何輕鬆做資料治理?開源技術棧告訴你答案
- Unix哲學17條原則的新感悟
- 遊戲UI設計的3條重要原則遊戲UI
- 資料治理 VS 公司治理、IT治理、數倉治理
- 資料治理的興與衰,如何進行資料治理?
- 資料科學家的15項原則資料科學
- 資料探勘:概念與技術(原書第3版)