5600字帶你全面系統瞭解主資料管理-億信華辰
在資料管理方面,有兩類資料,需要政企重點關注,第一個是後設資料管理,它是對所有資料進行定義,標準和劃分,賦予資料意義,後設資料管理是我們資料管理的基石。
第二個則是主資料,主資料是企業在運營中擔當關鍵角色,被系統間共享的資料,分散在各個系統之中,比如產品名,部門組織架構,會員資訊,供應商資訊等,都是重要,穩定,被屢次使用的主資料。
這篇文章,我們重點了解一下,主資料的概念,價值,與企業與其他資料的區別,管理範圍,以及如何在企業中具體實施落地。
01、什麼是主資料?
1.主資料概念
主資料,英文全稱是master data,根據國際資料協會DAMA定義:主資料是關於關鍵業務實體的權威的、最準確的資料,可用於建立交易資料的關聯環境,主資料值被認為是“黃金”資料。
說起來很抽象,我們直接可以理解,主資料是資料的一類,具有穩定,重要,被多系統,多部門使用的資料,比如商品資訊,供應商資訊,進貨資料,使用者會員資訊,部門組織架構等,在企業管理,業務發展中佔據重要作用。
2.主資料的3大特徵
根據官方定義,主資料有3大特徵:
(1)主資料相對穩定,變化比較小。比如超市裡的商品,一般來說,不會有太大的變動,常見的日用品,蔬菜水果,家用電器等,都是相對固定的,變化不大。
(2)主資料很重要,錯誤和不準確,都會產生重大的影響。比如電商促銷活動中,活動商品名出現錯誤,導致低價賤賣產品的情況,影響系統的交易資料,商品發貨,退貨售後,客戶溝通等一系列事情,產生嚴重影響。
(3)主資料被企業內多個部門,多個業務流程系統引用。比如超市商品清單資料,常常被進貨系統,倉庫管理系統,收銀銷售系統記錄,被多個部門和系統應用得十分頻繁。
3.企業常見的主資料
知道了主資料的特徵,那麼企業組織中,有哪些常見的主資料呢?企業中常見的主資料有企業組織架構,產品資料,物料資料,客戶資料,供應商資料等。
只要企業內部的資料,具備相對穩定,記錄條數少,被多個流程系統引用,被交易資料重複使用的特點,都屬於主資料。
比如企業組織架構,相對穩定不會隨便有大的變動,部門名稱被人力系統,財務系統,管理系統多個引用,對於公司日常運營管理非常重要。
02、主資料是企業資料6大層級中流砥柱
很多人可能之前聽說過後設資料,參考資料這些概念,那麼他們和主資料有什麼區別呢?第二部分,我們系統介紹企業資料的6大層次,帶大家瞭解各個資料型別的概念,作用以及特點,明白主資料是企業資料治理的中流砥柱地位。
企業資料型別,主要分為後設資料,參考資料,主資料,條件型資料,事務型資料,分析型資料6大類。
1.後設資料
後設資料,指的是描述資料的資料,是資料層次中的最底層,被稱為資料治理的基石。
後設資料通常是定義資料名稱,關係,欄位,約束關係等,用來表示資料相關的資訊,主要為資料交換提供一個規範和標準。
比如企業要記錄客戶資訊,需要用姓名,性別, 年齡,消費產品,消費金額這些詞語,姓名,性別,職業,消費產品,消費金額都是對客戶描述的後設資料。
2.參考資料
第二層是參考資料,它定義了後設資料的可能取值的範圍,可能理解為,限制一定範圍的後設資料,就是參考資料。
比如國家,地區,貨幣,品牌,產品型別這些通用的資料,具有穩定,靜態特點,基本不會變化,只需要通過系統配置檔案給予規範並固化在資訊管理系統中,參考資料是資料系統中的框架。
3.主資料
第三層是主資料,它是描述企業核心和運營的資料,被重複或共享應用於多個業務流程,多個部門和系統的高價值基礎資料。從主資料開始,資料就開始被應用,開始朝著企業管理,業務開始落地。
比如產品資訊,客戶資訊,供應商,部門組織架構等,都是具有重要,穩定,被多個系統和部門使用的主資料。
4.條件型資料
第四層是條件型資料,指的是出現在特定條件場景下出現的資料。比如銀行的客戶信用等級資訊,這個資料只有在評定使用者信用等級這個場景,才會出現。
5.事務型資料
事務型資料,指的是記錄企業運營過程中產生的業務資料,比如銷售訂單,採購訂單,財務憑證等,事務性資料,依賴於主資料,可以看做是主資料的細分內容,開始不斷細化。
6.分析型資料
分析型資料,指的是由各類事務型資料組成的資料,比如各種報表,BI分析,審計資料等,是由很多事務型資料,進行組成搭建的。
我們通過企業6大資料層次型別看到,後設資料是我們資料治理的基石,參考資料是資料系統中的框架,主資料是資料落實到企業管理,業務中的重要資料型別,條件型資料,事務性資料,分析型資料,則是不斷細分,滿足各個細分場景的資料。
03、影響主資料劃分範圍變化3大因素
前面我們已經知道主資料的重要性,如果管理不善,很容易影響組織的管理和業務問題。但要管理主資料的前提,就是如何識別主資料,先有了主資料,才能管理,所以我們需要限定主資料的範圍。
一般情況下,主資料是相對穩定的,比如公司產品資訊,供應商,組織架構,使用者會員資訊等,但是主資料也會隨著業務發展階段,業務運營模式,業務管控策略發生變化,企業需要實時增添刪減主資料。
1.業務發展階段
首先第一個影響因素是業務發展。主資料相對穩定,但隨著業務發展階段變化,也會改變。
比如一個新飯店經過一段時間營業,擁有一批忠實的老客戶,這時飯店就可推出會員制度,增加老客戶的粘性,企業收集了一批使用者會員資訊資料,因為會員資訊很穩定重要,並且要經過眾多會員系統,財務系統所引用,所以需要納入主資料管理的範疇。
因此,企業在業務發展不同階段,需要適當增加,或者刪減部分主資料,以滿足內部管理和業務發展的需求。
2.業務運營模式
第二個因素是業務模式發生變化。比如銷售訂單型別資料,很多時候,在面向B端企業屬於主資料,在面向C端企業則反而不是。
我們去超市購物的一次消費資料記錄,對於超市收銀系統來說,資料丟失也沒有太大影響,所以不能算做主資料。
但對於一些偏B端,產品客單價高的行業公司,比如華為公司接到一個上千萬,上億的網路建設的專案合同,通常在企業內部涉及採購,製造,工程,財務等多個業務環節,時間要長達數年之久。這個銷售資料重要,穩定,並且被多個部門和系統使用,所以屬於主資料。
因此,我們要深刻理解主資料含義,只要符合穩定,重要,被多個部門和系統使用的資料,才是專屬於某個行業,企業的資料。
3.業務管控策略
對於一些大型的集團,想要掌控各個分公司的客戶資料,是非常困難的,阻力很大。
所以即使集團總部想掌握這些重要的客戶資料,但因為無法被總部利用,沒有辦法在總部內部流通和使用,所以分公司的客戶,銷售資料,不算主資料。
所以企業在管理主資料時,也要根據業務發展階段,業務運營,業務管控策略等方向,對主資料進行增加刪減,重新確定主資料劃分範圍。
04、主資料管理實施5大步驟
主資料管理如何重要,那麼企業應該如何進行主資料的管理實施落地呢?企業主資料管理實施,主要分為5個步驟進行:
主資料管理實施5大步驟
1.明確主資料目標和範圍
首先,第一步,我們要明確主資料管理的目標和識別範圍。
(1)目標制定
企業內部需要開啟一個宣講會,讓組織的高層,中層,基層都加深對主資料管理的理解,設定主資料管理目標,提高重視程度,確保主資料管理的專案可以順利推進實施。
(2)主資料識別範圍
確定了目標之後,想要對主資料進行管理,我們首先要對主資料進行識別,判斷哪些資料是主資料,值得我們投入時間和精力去管理。
主資料識別,通常有4個步驟:
第一步,我們確定主資料識別指標,比如判斷資料重要性,穩定性,業務價值等
第二步,我們要基於主資料識別指標,構建評分體系,確定指標權重,根據重要性,穩定性,使用頻率等,每一個指標進行加權評分
第三步,根據業務調研和資料普查結果,確定主資料參評範圍
第四步,依據評分標準,在主資料參評範圍內,識別出企業主資料
2.主資料調研
確定目標和範圍之後,企業有了基本的方向和想法。接下來,就是實地調研,調研企業的主資料規則,管理情況,明白現實和目標之間的差距。
一般來說,資料資源調查,有2種方法,一種是從上往下,另一種是自下向上。
(1)自上而下調查
自上而下調查,一般是採用資訊資源規劃或者業務流程管理規劃採集資料。資訊資源規劃,指的是對所在單位資訊採集,傳輸和使用的全年規劃;業務流程更努力規劃,是根據業務的流程運作,獲取主資料的流通方向,使用頻次,
自上而下調查法,可以讓管理者對主資料管理現狀,有整體全面系統瞭解,可以看到資料流通,資料使用情況,消除資料孤島的問題,但缺點是需要消耗較高的成本和週期。
(2)自下而上調查
自下而上調查,一般是先確定主資料的資料範圍,先識別出主資料。
在限定範圍前提下,企業對主資料情況進行梳理和分析,這個方法的優點是針對性強,實施速度快,缺點是不夠系統和全面,一般是有了明確的專案目標和範圍內採用此方法最佳。
3.搭建制度與流程
確定目標和主資料識別範圍,調研了現狀,我們已經明確梳理出了主資料的情況,第三步,我們就要根據實際情況,從組織,制度,運營層面,對主資料進行管理。
(1)管理組織體系
良好的組織架構,是資料治理專案成功的保證,是高層管理者對資料治理專案重視性的體現,有一個專門的組織或者崗位管理主資料,是十分必要的。
常見的主資料管理崗位,有主資料系統管理員,主資料稽核員,主資料填報員,資料質量管理員等,具體組織部門和崗位,根據企業的實際情況而定。
(2)制度流程體系
部門成立之後,接下來需要特定的制度和流程體系,來確保管理的高效性。
企業需要明確主資料的歸口部門和崗位,明確崗位職責,每個主資料的申請,審批,變更,共享的流程,確保主資料管理有效實施。
(3)標準、安全和技術體系
有了整體的制度流程體系後,接下來就是具體的標準,安全和技術體系。標準體系,我們需要設定一格式,編碼標準,讓各個部門可以快捷高效識別和使用主資料。
安全體系,需要建立嚴格的身份認證,訪問控制,分級授權,安全審計,還包括資料加密儲存,加密傳輸,脫敏脫密等功能,保障資料安全。
技術體系,技術部門需要搭建應用層面和技術層面的體系。資料管理平臺,在應用層面需要具備資料管理,資料治理,資料整合等功能,技術層面,需要考慮系統架構,介面規範,技術標準等內容。
4.接資料
把目標制定,主資料調研,體系建立後,我們接下來做的需要接入和接出主資料,打通主資料在企業中產生,接入,接出的閉環。
(1)主資料接入
主資料接入是將主資料從資料來源系統彙集到主資料平臺的過程,過程需要對接入資料進行清洗、轉換、對映、去重、合併、載入,通過一系列的資料加工和處理形成標準統一的主資料。
(2)主資料接出
主資料接出,是把標準化的資料,共享給需要使用的部門的過程。
通過接入和接出,來測驗主資料的管理,制度,流程,標準,輸入和使用的各個情況測驗,方便後期日常運營的優化改進。
5.日常運營
主資料管理的最後一步,就是把主資料日常用於企業和組織中,發揮效用的運營過程。
日常運營過程,包括主資料運營管理優化,主資料推廣,主資料質量提升,主資料價值衡量4個部分。
(1)主資料管理優化
主資料管理優化,指的是對主資料的新增,變更,使用等過程中的規範,進行流程和制度的測試,達到定崗定責,流程順暢,標準鮮明的目標,對於日常使用問題,進行積累並不斷優化。
(2)主資料推廣
主資料推廣,指的是把主資料管理推廣到各個業務線,業務系統中,保障主資料的一致性,通過推廣和使用,讓資料輔助組織高層決策,提高組織運營效率。
(3)主資料質量提升
主資料質量提升,主資料是企業寶貴的資料資產,質量好壞影響著資料價值。所以在日常運營中,需要持續提升資料質量。主資料質量管理,包括主資料質量定義,主資料質量模型,主資料質量考評等。
(4)主資料價值衡量
主資料價值衡量,指的是企業要衡量主資料帶來的價值,更加深入主資料對組織管理,業務盈利起到的價值和作用。具體的作用有降本增效,提高了組織的運轉效率;資料輔助高層決策,增加業務收入等,需要進行價值衡量。
05、小結
主資料,是重要,穩定,被多個業務系統,多個部門反覆使用的資料。主資料管理,是企業組織資料治理中不可或缺的一環。
主資料管理離不開系統,但不僅僅是系統,而是集架構於標準、流程規範、組織和IT系統的一整套管理措施。用“統一標準、統一流程、統一源頭、統一組織”來約束與規範主資料管理絕對不為過。
億信華辰睿治產品,在資料管理方面,有主資料管理,後設資料管理,資料標準管理資料質量管理。
其中在主資料管理功能模組,睿治具備主資料識別申請,主資料檢索,主資料儲存,共享釋出,主資料監控等全套流程功能,幫助企業實現完整,全面的主資料管理閉環。
睿治資料治理平臺架構圖
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/69996137/viewspace-2900105/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- 企業如何做好資料資產的盤點|億信華辰
- “智慧之城”如何構建資料根基,打造資料治理新樣本-億信華辰
- 3分鐘帶你瞭解資料指標管理體系指標
- 帶你全面瞭解 OAuth2.0OAuth
- 億信華辰告訴你數字化轉型背景下,能源企業如何做好資料治理
- 7天帶你全面瞭解資料倉儲 體驗海量資料分析
- 實力入圍!億信華辰再次榮登大資料行業兩大榜單大資料行業
- 帶你全面的瞭解二叉樹二叉樹
- 兩張圖帶你全面瞭解React狀態管理庫:zustand和jotaiReactAI
- IDC:億信華辰位居中國資料治理解決方案市場份額第一
- 億信華辰:怎樣去斷定一份資料的質量高低?資料質量如何評估?
- 帶你瞭解分散式系統的資料一致性問題分散式
- “十二問”讓你全面瞭解MES系統是什麼!
- 億信華辰:地產行業數字化轉型新賽道行業
- 超級乾貨:帶你全面瞭解低程式碼!
- 8張圖帶你全面瞭解kafka的核心機制Kafka
- 帶你瞭解資料庫中JOIN的用法資料庫
- 帶你瞭解資料庫中group by的用法資料庫
- RFID系統硬體組成,帶你清晰瞭解
- 帶你瞭解資料標註之文字標註
- 帶你瞭解webpackWeb
- 瞭解直播帶貨系統使用的MySQL資料庫基礎MySql資料庫
- CRM系統的銷售管理功能,你瞭解多少?
- 企業如何使用CRM客戶管理系統全面瞭解客戶
- 火速來看帶你 全面的瞭解以及更好地掌握CleanMyMacMac
- 理論+應用,帶你瞭解資料庫資源池資料庫
- 統信作業系統下資料庫管理利器作業系統資料庫
- 資料洩密所帶來的影響:一個全面的瞭解
- 今夜,大資料帶你瞭解當代青年加班狗大資料
- 帶你深入瞭解什麼是商業資料分析
- 不知道資料模型?一文帶你瞭解資料模型!模型
- 4張圖讓你瞭解:雲管理平臺系統如何進行資源管理的?
- 帶你瞭解BlueHost主機企業郵局使用教程
- 帶你快速瞭解HTMLHTML
- 一文帶你全面瞭解網路遊戲的社交生態遊戲
- 10分鐘帶你瞭解 Linux 系統中的 Top 命令Linux
- 保險業報告:全面瞭解生態系統
- 帶你瞭解資料庫中事務的ACID特性資料庫