Smartbi:資料治理系列之後設資料管理平臺的原理
隨著大資料時代的到來,企業在日常業務運營中積累了大量的資料。如何從這些海量資料中挖掘出有價值的資訊,已經成為許多企業迫切需要解決的問題之一。隨著大資料平臺和因特網的興起,資料治理逐漸成為企業挖掘資料價值的重要手段和工具。理解資料治理這一概念可能會有些困難,但沒關係,一步一步來,今天我們瞭解一下資料治理的基礎——後設資料管理。
一、什麼是後設資料管理?
在瞭解後設資料管理之前,首先要了解後設資料的定義。後設資料主要記錄資料倉儲中模型的定義、各級之間的對映關係、資料倉儲的資料狀態和ETL的任務執行狀態。後設資料管理是對資料採集、儲存、處理和顯示等資料生命週期的描述資訊,幫助使用者理解資料關係和相關屬性。後設資料管理是企業資料治理的基礎,是企業級資料倉儲的關鍵組成部分,貫穿於資料倉儲的整個生命週期,利用後設資料帶動資料倉儲的發展,使資料倉儲自動化、視覺化。
二、後設資料管理平臺的功能
後設資料管理平臺主要包括後設資料採集服務、後設資料訪問服務、後設資料管理服務和後設資料分析服務。
1、後設資料採集服務:能夠適應異構環境,支援從傳統關聯式資料庫和大資料平臺中採集從資料生成系統到資料處理系統到資料應用報表系統的全量後設資料,包括過程中的資料實體和資料實體處理過程中的邏輯。
如思邁特軟體Smartbi資料管理平臺內建多種採集介面卡,支援多種儲存格式的後設資料自動獲取,如:資料庫、報表工具、ETL工具、檔案系統等。在資訊管理方面,Smartbi可以管理系統中的後設資料資訊,包括表、欄位、引數、業務主題、多維模型、查詢、儀表盤等資訊管理。
2、後設資料訪問服務:後設資料訪問服務是後設資料管理軟體提供的後設資料訪問介面服務,一般支援REST或Webservice等介面協議。通過後設資料訪問服務支援企業後設資料共享,是企業資料治理的基礎。
3、後設資料管理服務:實現後設資料的模型定義和儲存,將功能層包裝成各種後設資料功能,最終提供應用和展示;提供後設資料分類建模、血緣關係和影響分析,方便資料跟蹤和追溯。
4、後設資料分析服務:後設資料的應用一般包括資料地圖、血緣、影響分析、全鏈分析等。
三、後設資料管理平臺對企業運營的價值
後設資料管理平臺為使用者提供高質量、準確、易於管理的資料,貫穿於資料中心建設、執行和維護的整個生命週期。通過後設資料管理,可以形成整個系統資訊資料資本的準確檢視,縮短資料清理週期,提高資料質量。後設資料管理有利於統一資料口徑,標明資料方向,分析資料關係,管理資料變更,為企業級資料治理提供支援,是企業實現資料自我服務,促進企業資料運營的可行路線。
可見後設資料管理對企業運營的重要性,當然這一切都離不開後設資料管理工具的推廣。萬丈高樓平地起,所以小夥伴們在進行資料治理工作時也一定不能忽視後設資料管理工具的選擇喔,可以多嘗試一下再選擇。
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/69965912/viewspace-2842826/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- 資料治理之後設資料管理
- 資料治理之後設資料管理實踐
- 如何進行投後資料管理?Smartbi投後資料管理平臺來幫你
- 資料治理之後設資料管理的利器——Atlas入門寶典
- 資料治理--後設資料
- 資料治理管理平臺有哪些特點
- 「資料治理那點事」系列之四 | 書同文車同軌:資料治理之資料標準管理
- 資料治理之資料質量管理
- 資料治理實踐:後設資料管理架構的演變架構
- 資料治理管理平臺功能模組與特性
- 資料治理的關鍵:後設資料治理如何開展
- 大資料治理——搭建大資料探索平臺大資料
- 如何做好資料治理平臺
- 一站式後設資料治理平臺——Datahub入門寶典
- 開源 Amundsen:資料發現和後設資料平臺
- 資料服務基礎能力之後設資料管理
- 大資料治理平臺有哪些價值大資料
- 資料治理之資料的“管”與“用”
- 資料治理:資料質量管理策略!
- 資料治理的成功要素:資料戰略管理
- 如何理解資料管理、資料治理、資料運營
- CDS — 資料管理分析平臺
- B站大資料開發治理平臺的產品設計心得大資料
- 美團酒旅起源資料治理平臺的建設與實踐
- 資料治理:管理資料資產的最佳實踐框架框架
- 資料治理之資料梳理與建模
- DevOps後設資料管理dev
- 一文說清資料管理、資料治理和資料資產管理
- CDGA|從平臺自治到規範化的資料治理
- TDS:標籤平臺+API平臺+資料共享平臺,助力資料運營平臺建設API
- 全平臺資料(資料庫)管理工具 DataCap 管理 Rainbond 上的所有資料庫資料庫AI
- 資料治理之資料模型管控方案模型
- 使用Atlas進行後設資料管理之Glossary
- 資料平臺、大資料平臺、資料中臺……還分的清不?大資料
- 資料治理:資料標準管理指的是什麼?
- DataHub:LinkedIn的後設資料搜尋和發現平臺
- 2萬字揭秘阿里巴巴資料治理平臺建設經驗阿里
- 關於後臺資料庫設計的考慮(手機平臺)資料庫