資料治理的十二條技術原則
企業開展資料治理過程,有哪些技術原則可供指導資料治理工作?本文給出了十二條技術原則建議,供大家參考。
原則一:視覺化管理企業資產
比如,透過使用儀表板展示企業的資料資產情況,包括資料來源、儲存位置、資料質量等,方便呢管理者快速瞭解和監控資料資產狀態。又比如,利用資料目錄工具視覺化展示不同資料集的結構和關係,幫助使用者理解和發現資料資源。
原則二:自動獲取資料資訊
利用自動化工具和流程,從各種來源獲取資料。比如,設立定時任務,自動從各個業務系統和資料庫中提取資料,並將其載入到資料倉儲或資料湖中。
原則三:大資料服務智慧化
將大資料服務(如儲存、處理、分析等)智慧化,以提高效率,支援更高階的資料治理需求。
原則四:資料管理能力服務化
將資料管理能力以服務的形式提供,使其更易於部署和維護。比如,提供資料質量管理平臺,讓使用者可以透過自助服務的方式進行資料質量評估、資料清洗等操作。
原則五:從需求開始控制資料質量
從需求開始,就要制定相應的資料質量控制策略和流程,確保資料符合預期的質量標準。比如,對業務部門提出需求開始,就要制定相應的資料質量標準和指標。
原則六:在整合點檢查資料質量
在資料整合的關鍵節點上檢查資料質量,及時發現和解決資料質量問題。
原則七:持續積累檢核規則
持續積累並更新資料質量檢核規則,以適應不斷變化的資料環境和需求。比如,在資料整合的關鍵節點(如ETL過程中)設定資料質量檢查點,對資料進行質量評估和驗證,及時發現和解決資料質量問題。
原則八:自動化質量評分
利用自動化工具和演算法,對資料質量進行評分和監控,及時發現和處理質量異常。比如,基於預先設定的資料質量規則和指標,自動對資料進行質量評分,並生成質量報告和警告資訊。甚至可以基於資料質量評分結果反饋,自動觸發資料質量改進流程,對資料進行修復等。
原則九:管理核心資料定義
管理好核心資料的定義,確保不同系統和業務部門對核心資料的理解、使用一致。
原則十:為資料標準新增技術屬性
為資料標準新增技術屬性,使其更容易實施和管理,並支援資料治理的自動化流程。
原則十一:識別與管理業務語義
識別和管理業務術語和語義,確保不同業務部門之間的資料交換和理解一致性。
原則十二:關聯業務語義與技術
將業務語義與技術實現相互關聯,確保業務需求和技術實現之間的有效對應和溝通。
來自 “ 半山裡人 ”, 原文作者:level;原文連結:https://mp.weixin.qq.com/s/XN0ZuMFUuCDrubZZRL2LXQ,如有侵權,請聯絡管理員刪除。
相關文章
- 資料治理的目標和原則
- 企業主資料治理的“五化”原則
- 資料治理:資料整合的關鍵技術
- 騰訊資料治理技術實踐
- 美團技術leader:寫給工程師的十條精進原則工程師
- CDGA認證|資料治理和數字化的12項原則
- 專案管理十二原則專案管理
- 架構師進階,微服務設計與治理的16條常用原則架構微服務
- 技術管理的6個關鍵原則
- 從技術方面來看:資料治理怎樣進行?
- 從技術方面來說,資料治理怎麼進行?
- Salesforce架構的10條原則Salesforce架構
- 軟體開發的七條原則
- 遊戲設計的11條原則遊戲設計
- 有關資料驗證的原則
- 掌握資料治理的藝術:制定資料戰略藍圖
- Unix哲學17條原則的新感悟
- 談談構建有效資料治理策略的10條建議
- 如何輕鬆做資料治理?開源技術棧告訴你答案
- 17條建模實踐與原則
- 理論+實踐解析“IT治理”之模式與原則模式
- 資料治理的興與衰,如何進行資料治理?
- 奇點雲資料中臺技術匯 | 資料治理——企業數字化轉型的基石
- 資料治理 VS 公司治理、IT治理、數倉治理
- 寫給工程師的十條精進原則!工程師
- 寫給工程師的10條精進原則工程師
- 寫給工程師的十條精進原則工程師
- 遊戲UI設計的3條重要原則遊戲UI
- 提升資料安全的五大原則
- 對待資料質量的28個原則
- 資料治理的關鍵:後設資料治理如何開展
- 固定資產管理系統條碼技術與RFID技術的使用區別
- 正確使用資料架構的五條規則 - infoworld架構
- 資料庫設計原則與方法資料庫
- 寫給前端工程師的10條實用原則前端工程師
- 61條物件導向設計的經驗原則物件
- 寫給工程師的十條精進原則-摘要工程師
- 大資料時代的資料治理!大資料