放眼全球,資料作為一種新興生產要素,在全球經貿活動中扮演著至關重要的角色,驅動著數字經濟的蓬勃興起。據前瞻預測,至2025年,全球資料流動對整體經濟增長的貢獻預估將達到驚人的11萬億美元。
近幾年國家對資料要素關注度不斷上升。2023年12月31日,國家資料局等17部門聯合印發《“資料要素×”三年行動計劃(2024—2026年)》,該計劃書中提到,發揮資料要素的放大、疊加、倍增作用,構建以資料為關鍵要素的數字經濟,是推動高質量發展的必然要求。
可以預見的是,2024年,一個全新的“資料×”時代將全面啟幕,釋放資料乘數效應,催化新質生產力的發展。而實現這一目標的關鍵路徑在於推進資料資產化程序,利用資料要素驅動業務變革,實現資料價值。
本文將深入探討資料要素與資料資產化的定義及其重要性,並在大資料背景下明確它們的關鍵角色。同時,梳理資料資產化的實現路徑以及如何實現資料的應用價值,從而為企業在新時代的創新發展賦能,實現業務升級與價值躍遷。
資料要素&資料資產化
什麼是資料要素?
據《資料要素白皮書(2022年)》,資料要素是指參與到社會生產經營活動中,為所有者或使用者帶來經濟效益的資料資源。因此,“資料要素”一詞是面向數字經濟,在討論生產力和生產關係的語境中對“資料”的指代,是對資料促進生產價值的強調,即資料要素指的是根據特定生產需求匯聚、整理、加工而成的計算機資料及其衍生形態,投入於生產的原始資料集、標準化資料集、各類資料產品及以資料為基礎產生的系統、資訊和知識均可納入資料要素討論的範疇。
資料要素的核心屬性包括唯一性、原子性和定義清晰性,這些特性使得它們能夠被系統準確識別、處理和分析。比如我們的手機號碼、郵箱地址、瀏覽網頁的記錄等等,這些都是資料要素,它們可以被收集、儲存、分析和利用,幫助我們更好地做出決策和解決方案。
資料資產化的必要性
在數字經濟中,確保資料的有效和安全利用是至關重要的。而資料資產化的實施,正是構建資料質量和安全保障體系的基礎所在。資料資產化包括資料的收集、儲存、使用和分享的規則和標準,此外,資料資產化還涉及到資料的隱私保護和合規要求,確保資料的使用不會侵犯個人權利或違反法律法規。
所以可以說,資料資產化是實現“資料要素x”的基礎,只有透過對資料資產的規範性管理才能為資料實現經濟價值創造條件。透過資料資產化,可以更好地管理資料資產的獲取、儲存、處理、共享和使用過程,提高資料的可靠性、準確性和安全性。
如何實現資料資產化?
藉助袋鼠雲的「資料資產管理平臺」,透過後設資料採集、後設資料管理、後設資料分析的完整鏈路,採集並維護規範的後設資料資訊,打通資料關係網路,企業能夠實現對資料資產化的標準化和規範化管理。
並且,企業可透過資產盤點瞭解資料資產大盤,結合資料安全管控相關功能,為資料價值挖掘提供 “全、統、通” 的後設資料基礎,充分釋放資料要素潛能,驅動業務創新與升級。
後設資料採集
後設資料採集是實現資料資產化的基礎。要做後設資料資訊的採集,首先要透過企業內調研,梳理企業需要統一做後設資料管理的業務資料、湖倉資料或者應用資料。收集到各類資料的資料來源連線資訊後,向各資料負責人申請只讀後設資料許可權,來進行後設資料的採集。
成功連線資料來源後,可透過袋鼠雲「資料資產管理平臺」建立針對具體資料來源或資料庫的週期同步任務以及臨時同步任務。若存在無需採集維護的資料庫表資訊,可透過設定資料庫過濾條件和資料表過濾條件,避免不重要的資料庫/表同步到資產平臺,並支援配置後設資料的臨時同步內容與同步任務的排程週期。
在同步完成後,平臺會自動採集每類資料來源下資料表的後設資料資訊,例如所屬資料庫、資料表建立時間、DDL 最後變更時間、儲存位置、儲存大小、儲存格式、錶行數、表型別等技術屬性資訊,完成資料資產化的初步維護工作。
後設資料管理
完成後設資料採集後,可根據具體業務需求,進行後設資料的規範化管理,提升資料資產化的質量。首先,可透過線下和各資料來源負責人溝通後設資料缺失情況,探討後設資料模型設計規範,列舉出每類資料來源需要維護的後設資料項並錄入平臺。
其次,可透過後設資料維護手段,為每一份後設資料分配負責人,保證後設資料維護的工作能夠落實責任到人。負責人需要根據安排完整地維護缺失的後設資料資訊,且所有參與維護人員均可給該資料資產打上自定義標籤,方便快速按照標籤分類查詢資料資產資訊。管理者可定期統計後設資料完整性,追蹤後設資料維護進展,可根據多種維度如資料來源、責任人定期進行統計,及時發現問題,督促責任人完善後設資料資訊。
同時,透過平臺提供的資料標準管理能力,可規範資料資產的欄位級標準資訊。透過詞根管理及標準管理,定義資料表中欄位的標準資訊,例如欄位名稱、欄位中文名、欄位型別、欄位長度等資訊。
後設資料分析
在完成了後設資料採集和後設資料管理後,可根據後設資料的資訊進行分析,平臺提供針對後設資料的完整度分析、質量分析、血緣分析,全方位對企業內部的資產資訊進行分析整合,便於企業有效管理資料資產。
完整度分析:統計完整度百分比,支援從多維度包括平臺級、資料來源型別級、資料來源級、資料庫級、負責人級、具體屬性級分別進行統計分析。比如,在按照負責人維度進行統計分析時,可充分利用統計結果來推動和監督資料開發人員及時、完整地維護後設資料資訊。
質量分析:平臺提供質量校驗能力,可提供多種質量監控場景,針對單表校驗、多表比對內建了豐富的校驗函式,滿足企業對資料的及時性、完整性、一致性、有效性、準確性進行多維度校驗的要求。透過事前規則配置、事中規則校驗、事後分析報告的流程化方式,對資料進行多維度評估,保障企業資料質量。
血緣分析:透過血緣分析能力,企業可及時發現一些肯定存在血緣關係,但是血緣關係缺失的表,如數倉下游層級的表、BI報表等。企業可設定需要監控血緣關係的資料庫資訊,平臺會根據血緣 SQL 解析的結果,統計庫中血緣孤立的表,輔助企業監控資料資產質量,最佳化資產儲存空間。
資產盤點及展示
平臺提供資料地圖功能,彙總企業的所有資產化資料,包含資料庫表、開發任務、指標、標籤、API 等多種型別的資料資產,為使用者提供一個統一、完整、便捷的後設資料查詢門戶。支援多種搜尋模式、過濾條件,快速定位後設資料,可同時根據查詢結果,不斷發現後設資料缺失情況,反哺推進後設資料的維護工作。
同時,平臺還提供資產大盤,企業可透過資產大盤分析整體資產的變化趨勢、分佈情況、價值排行、儲存佔比等資訊,全面瞭解資料資產的整體情況。為管理層提供資產視覺化入口,輔助管理層制定建設方向決策。
資料安全管控
資料資產化的管理離不開資料安全管控,袋鼠雲「資料資產管理平臺」支援對資料進行脫敏規則管理、資料許可權管理及資料分級分類。對於一些敏感資料,例如手機號、身份證號等私密資訊,可自定義配置脫敏規則進行脫敏展示。平臺支援行列級別的許可權配置,可根據資料分級分類與使用者等級掛鉤來控制使用者許可權範圍,實現資料許可權的細粒度管控。
總結
資料資產化能夠顯著提升企業的資料管理效能,充分挖掘和實現資料的應用價值。透過這一過程,企業能夠系統地對資料進行分類、儲存、檢索,實現資料的統一匯聚,而不是分散在各個系統、各個檔案中。
同時,資料資產化帶來的統一管理模式在強化資料安全性方面發揮著關鍵作用。企業可透過對資料進行脫敏加密和密級許可權控制,確保只有授權人員才可訪問、修改資料,從而在最大程度上保障資料的安全性和隱私性,為企業在合規前提下充分利用資料資產奠定基礎。
資料是一切的起點,企業應高度注重資料資產化的推進工作,加強資料管理能力,充分利用資料資產推動企業的可持續發展。
有資料資產需求的使用者可以點選下文的連結,試用【資料資產平臺】。
資料資產平臺:https://www.dtstack.com/dtinsight/dataassets?src=szsm
《行業指標體系白皮書》下載地址:https://www.dtstack.com/resources/1057?src=szsm
《數棧產品白皮書》下載地址:https://www.dtstack.com/resources/1004?src=szsm
《資料治理行業實踐白皮書》下載地址:https://www.dtstack.com/resources/1001?src=szsm
想了解或諮詢更多有關大資料產品、行業解決方案、客戶案例的朋友,瀏覽袋鼠雲官網:https://www.dtstack.com/?src=szbky