資料治理與資料分類分級!
01
1
資料分類分級提出的背景
資料的價值
1
資料爆炸時代,資料量呈指數級增長
我們要如何看待資料這個話題。資料大爆炸已經成為了一個趨勢,隨著數字化轉型的步伐逐步加快,資料的誕生不斷加快。我們已經真正步入到一個大資料的時代。每個人每時每刻都在產生大量的資料,隨著移動網際網路的應用和感測網路的普及,我們的資料呈海量式增長,根據IDC釋出的報告中統計,到2025年,全球的資料量將達到163ZB。
80%以上的應用,將實現雲化,加上物聯網、智慧城市、人工智慧、5g等新技術的應用,將不斷的縱深發展,使得資料量有機會實現海量的增長。IDC研究的報告表明,我們每兩年可獲取的資料量將翻一番。這是我們看到的一個資料發展的過程。
2
資料成為數字時代重要戰略資源
回顧資料發展的整個過程會發現,資料已經成為當代的戰略性的資源。從上世紀四十年代到八十年代,由於計算機的昂貴、體積大、能耗高,往往只限於國防、氣象、科研研究的一些領域。那時候一臺計算機是有幾個房子那麼大,資料的儲存量不是很高。而進入到了資訊科技的1.0時代,也稱為IT時代,這一時期是以單機應用為主要特徵的數字化階段,以數字化辦公和資訊管理系統逐漸代替純手工資料,此時的資料僅限於辦公等資訊。資訊化1.0階段的特徵是資料資訊描繪(對映)現實。
從上世紀九十年代中期到2015年,隨著網路發展,特別是網際網路的興起。以網際網路為應用特徵的網路化,加速了資料的傳播、流通和匯聚,資料呈現海量的、多樣性、時效性、低價值密度等一系列特徵。網路促進了我們彼此的交流溝通,將各個方面的事情組合起來。這時候資料驅動現真實模式的改變。電子商務的興起,電子政務的廣泛應用,使我們真正進入了網路的時代,就是“IT+”時代。
進入到2015年,特別是大資料技術的興起,我們實際上是進入到真正意義上的資料時代:以資料的深度挖掘和融合應用為特徵的智慧化時代。特別是感測網路無處不在的現實及廣泛應用,使資料量急劇增長。資料不斷的產生、計算、分析、應用、迭代……構成了一個真正意義上的網路,我們已經深入到網路空間中,成為自海、陸、空、天之後人類的第五大生存空間。
而在這個第五大生存空間中,資料扮演了重要的角色,成為網路空間源源不斷地流淌的血液,成為了知識經濟的原材料更成為繼物質、能源之後又一種重要的生產要素和戰略資源。資料進一步變成了驅動現實的一種方式。
特別是隨著數字孿生技術的發展,我們透過這種方式可以進一步的描述現實,進而再來改變現實。從未來發展趨勢看,資料要素已成為重要的發展驅動。
我們國家高度重視新技術的發展,那麼如何在這一宏觀背景下將資料要素的價值真正釋放出來呢?
3
生產要素由市場評價貢獻、按貢獻決定報酬機制開始建立
如果放在更加宏觀的歷史背景來看,資料成為農耕社會後的重要的生產要素是人類進入資訊化社會之後才形成的。我們回顧歷史看看生產要素的變更過程。
農耕社會主要的生產要素是土地、勞動力,在構造及生產發展的過程,要解決人類的生存,解決吃飯的問題,這是農耕文化發展的過程。
步入到工業社會,核心的生產要素是土地、勞動力、資本、技術、管理、知識。這時候是透過這種方式來促進工業化的革起,透過大規模化的生產,透過資本的力量來帶動土地、勞動力的有效流通,這為為現代化工業生產奠定良好的基礎。
第一方面的任務是推進政府資料資源的開放共享。
這裡重點圍繞著經濟治理資料資源庫建設、資料共享交換以及資料開放流通制度這方面的工作開展,目的是要豐富資料資源體系,促進資料資源的有序開放共享和有效流動。
第二方面的任務是提升社會資源的價值,包括兩方面的工作內容:
● 一是要圍繞著數字經濟的新產業、新業態、新模式來支撐構建農業、工業、交通、教育、安防、城市管理、公共資料交易等方面的資料資源開發利用場景,促進資料開發利用。
● 二是要規範資料的採集行為。要發揮行業協會商會的作用,推動人工智慧、可穿戴裝置、車聯網、物聯網等相關領域的資料採集的標準化、規範化,使資料的質量不斷提升,使資料的內容不斷豐富。
第三方面的任務是加強資料資源的整合和安全保護,主要包括四方面工作內容:
● 一是建立統一規範的資料管理制度,提升資料的規範性。
● 二是根據資料性質完善資料產權性質,探索不同類別資料的差異化管理。
● 三是制定資料隱私保護制度和資料安全的審查制度,形成一個資料安全保護制度體系。
● 四是推動完善適用於大資料環境下的資料分類分級安全保護制度,透過分類分級來完善安全的保護制度,分類施策,對政務資料,企業商業機密和個人資料進行差異化的保護,加強對政務資料、企業商業秘密和個人資料的保護。
以上就是中央檔案關於資料要素市場培育的主要內容。這又提出了一個新的話題,就是在這樣的一個構建數字要素市場過程中,我們必須對資料的特徵進行進一步的分析,要對差異化的資料開展治理。
資料治理的必要性
1
海量資料需要治理
海量資料的爆發增長使我們猶如進入了一個數字海洋,我們在資料的海洋中望洋興嘆,不知所蹤。資料蘊含著豐富的價值,是當代的石油,當代的黃金。但是如果不能對資料進行有效管理和開發,資料並不可能產生真正的價值。如果沒有高效的管理和治理,資料價值就不可能產生,甚至有可能造成巨大的風險,有效的資料管理和治理是數字經濟發展的基礎。
2
海量的資料引發“資料危機”
同時我們看到,資料時代還面臨著資料危機的挑戰。海量的資料引發我們的對“資料危機”的思考。“資料危機”這個概念是引用了上世紀六十年代所談到的軟體危機。軟體危機導致的最大的問題是軟體的開發模式無法適應快速增長的軟體需求,質量無法保證。我們對比來看,當今的資料也有軟體危機的表現形式。
一是資料壁壘森嚴
當前國際上普遍形成了一種各自本地化的要求,形成了一個資料壁壘。2016年歐洲國際政治經濟中心(ECIPE)研究分析了強制資料本地化等資料保護措施對巴西、歐盟等 7個國家和地區造成的負面經濟影響。
二是資料壟斷
2018年3月,Facebook被爆出與英國諮詢公司劍橋分析違規分享超過5000萬使用者資料,在使用者不知情的情況下,上述資料被劍橋分析用於使用者心理剖析,併為其目標客戶投放針對性的政治競選廣告。
三是內部資料的洩露事件也頻發
實際上,很多洩露的內容大部分都是來源於內部管理的失效,大量的資料洩露的事件,對於我們的個人的隱私,乃至我們的金融安全,造成了很大的風險。
四是資料質量問題
海量的資料彙集完以後,資料的質量差、缺乏管理、資料不完備、無效性、冷資料、資料標準規範、資料、權威性不足,導致無法利用高質量的資料進行科學的決策,影響資料的高效應用,資料的茫茫大海,我們有迷失方向的威脅。
3
資料管理(治理)成為國際關注焦點
為此,各國都在將資料管理和治理看作重要的內容,這也成為全球關注的焦點。比如歐盟,釋出了全球第一個最嚴格的資料法規——《通用資料保護條例》(GDPR);法國提出了“資料稅”的探索;美國聯邦政府將資料作為政府的聯邦戰略,以政府資料治理為主要視角,來提出了未來的聯邦政府的資料的願景和關鍵的行動計劃;2020年2月,歐盟也釋出了《歐盟資料戰略》,以數字經濟發展為主要視角,推動構建歐洲單一資料市場,提升競爭力。
總的來說,資料管理成為未來全球各國競爭的焦點,成為各國的戰略聚焦點。資料治理,也成為國家治理的有效手段和重要組成部分。
4
我國積極推動大資料發展戰略實施
在十九大報告中,提出了要推動網際網路大資料、人工智慧與實體經濟的深度融合,進一步突出了大資料作為我國基礎戰略性資源的重要地位。
從目前分析來看,中國是全球資料增長最快的,擁有資料最多的國家。我們掌握了豐富的高質量的資料,如何將這些資料轉化成新的經濟增長的動力是我們經濟發展下一步的主要內容。對這樣海量的資料進行有效的管理是我們大家共同面臨的主要目標。
這裡的核心就是做到資料的有效的管理。我認為的資料如源源不斷的水,不斷滋潤著數字經濟的發展。中國人崇尚水文化,強調上善若水,水善利萬物而不爭。但是我們也看到,水可載舟,亦可覆舟,如果說不能對水進行有效的治理,就會導致水患。同樣的,資料也需要治理。加強資料治理,發揮資料價值成為搶佔未來發展主動權的重要方向。
5
資料管理及治理的價值和意義
那麼這個從幾個方面來看資料治理和管理的價值。
第一
是組織機構數字資產保值增值的必然舉措
透過資料驅動來提高我們的運營效率,降低組織的投入成本,提升組織的管理過程。透過有效的組織管理來提升組織的資產價值,那麼我們必須要按照資產的方式,將資料進行管理。
第二
有助於引領行業的創新和規範化的發展
對資料進行有效的管理一方面可以進一步促進產業轉型升級,另一方面,資料管理也成為行業監管的有效手段,透過資料的有效管控對行業進行規劃。再之,透過資料有效治理和管理,能夠培養一批既懂產業,又懂資料的核心人才,讓這些人不斷地發展我國的資料產業。
第三
透過資料賦能治理體系和治理能力現代化
透過“資料多跑路,百姓少跑腿”,“用資料決策、用資料說話、用資料管理”來提升政府的治理水平和治理能力現代化。透過網路通、資料通和業務通,來倒逼政府的內部的制度最佳化,助力政府、市場和社會關係的協調平衡。利用資訊化的手段來提升政府的治理能力,透過資料的粘合提升行政管理效率,打造一個真正讓人民滿意的服務型政府。
資料管理意義
1
國際視角:
主要已開發國家紛紛佈局工業資料搶佔先機
從國際視角來看,我們面臨著製造業轉型升級的重要先機,各個已開發國家都紛紛佈局工業資料先機。隨著雲端計算、大資料和物聯網等新興產業的發展,全球掀起了以製造業轉型升級為主要任務的新一輪工業革命,各個已開發國家紛紛制定再工業化的戰略。
法國在2013年提出了“新工業法國計劃”,主要就是實現工業生產向數字化、智慧化的轉型,以生產工具的轉型升級帶動商業模式的轉型。
2015年由德國提出的工業4.0戰略,實施重點在於資訊互聯技術與傳統工業製造的結合,強調透過CPS(資訊物理系統)提升製造業的靈活性和工程效率,掀起了全球工業化改革的新一輪革命。美國也在2018年提出了《先進製造業領導力戰略》,提出“要透過大資料分析和先進感測和控制技術應用於大量製造業活動,促進製造業的數字化轉型”。
2
國家視角:
我國由製造大國向製造強國轉變的關鍵舉措
我們國家已經成為全球重要的製造大國,當前中國製造業面臨產業“雙向轉移”的壓力。勞動密集型的中小製造企業正在向其他勞動力和資源更低廉的新興發展中國家轉移,部分高階製造業在向歐美髮達國家迴流。
作為製造業大國,我們時刻產生著海量的工業資料,這成為我們國家國際競爭和國家安全的基礎要素,也是我們國家制造業轉型升級的戰略資源。如何做好資料大文章,是我們從“跟跑、並跑、到領跑”,實現“彎道取直、,“跨越發展”的關鍵要素支撐。
3
企業視角:
推進企業數字化轉型的緊迫要求
從企業視角來看,工業資料是製造業實現從傳統要素驅動向數字要素驅動的核心關鍵。
一是最佳化全要素配置效率
透過全產業鏈供需資料來進一步最佳化要素的配置效率,最佳化配置生產所需的原材料,裝置,勞動力,資金等,可以實現農業生產,排程,分配,全域性最佳化,促進工業全要素生產率的全面提升。
二是改進生產過程的質量保證
透過建立包括產品生產過程的工藝資料、,線上監測資料等全生命週期的質量資料體系,可以有效的追蹤資料質量問題產生的原因,持續增強生產過程的質量保障能力。
三是可以促進生產流程的智慧化
透過對裝置和工廠進行智慧化升級,促進資料共享系統和業務的協同,實現製造過程中的科學決策,進一步促進生產過程的智慧化、定製化、柔性化、自我最佳化,實現真正意義上的精準製造、高階製造、敏捷製造能力。
工業資料的聚合融通離不開資料的有效管理,更需要資料的安全使用。工業資料作為全新的生產要素,在管理執行,開發利用,流通共享等方面存在的問題困難是我們需要進一步加以研究和分析的。
1
02
1
資料分類分級推進路徑
對於企業內部來說,如何來開展資料的分類分級?這就要進一步學習領會3月份釋出的資料分類分級的指南試行版的內容。
理順工作思路
一方面,要理清工作思路,首先要明確三級分類的範圍。
另一方面,要從資料產生系統和業務出發,將業務的框架、邏輯、表現過程,按業務、系統、模組等不同的衡量進行分類。
三就是要從業務和系統看資料的分佈情況,要明確資料在哪裡、資料由誰提供、資料的格式是什麼等等這方面問題。
定級就是要對資料的安全性,對每類資料進行級別的劃分,然後進行差異化的防護。理清工作思路就能清楚如何開展資料分類分級工作。
明確資料類別分類
明確資料類別分類也是很多企業困擾一個問題。
一方面是站在組織架構和核心業務的視角來分析資料,就是按照部門業務、資料內容,對企業資料進行全面的梳理,這樣是站在業務側來去看資料系統化、規範化的管理程度。
另一個可以從資料從哪裡來入手。基於“企業業務—支撐業務的系統功能—對應資料庫和資料表”進行分類。大部分資料都來源於資訊系統,我們可以站在業務——支撐各個業務系統的系統功能上,對現有的資料庫、資料表進行分類。大部分的企業可以透過先梳理現有的業務系統,如ERP、MES系統,按照《指南》的五個資料域進行分類,然後根據功能模組對應的資料庫和資料表今後一步劃分資料子類。
這兩方面是殊途同歸的。一個是站在業務視角上考慮問題,一個是從技術視角上考慮問題,相互促進。
做好工作保障
資料分類分級的各項工作絕不僅僅是IT部門的事情,它是一個治理的過程,必須要形成一個良好的綜合協調機制,要以業務視角和技術視角相融合的方式來開展,這樣才能使工作推向深入。
另一方面,要實現資料分類分級全覆蓋,要按照工序,業務流程,功能等思考資料分類分級。同時,要細緻準確的做好資料的逐類定級,要把資料的受損情況降低到最低,然後來評價每項資料的保護措施是否到位,這樣才能夠形成一個閉環。最後,要在現有的基礎上,站在資料的維度上進行管理,進一步梳理資料,形成一個有機的管理體系。
尋求第三方支撐
這裡實際上要如何做好呢?很多企業還不會做的話可以尋找第三方的支援。第三方機構的支撐工作內容包括開展深入的調研,充分收集相關的資訊;評估調研的結果,找到癥結所在;組織內部的培訓,加大方法的宣傳;編制相關的指導檔案,構建相關的管理體系;指導結果的稽核,做好評定的準備;監控諮詢的質量,提高優質的服務,這樣才能夠保證這項工作得到有效進行。
資料治理是一個有起點,沒有終點的過程,是必須要堅持,久久為功常抓不懈才能走向深入。
來自 “ ITPUB部落格 ” ,連結:https://blog.itpub.net/70035284/viewspace-3000254/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- 資料分類分級究竟是什麼
- 資料分類
- 好大夫資料安全分類分級實踐探索
- 《工業資料分類分級指南(試行)》解讀
- 《資料安全法》實施在即,企業如何做好資料分類分級?
- LVDS介面分類與資料格式
- 資料庫用途分類資料庫
- 《資料安全能力成熟度模型》實踐指南01:資料分級分類模型
- 眾至科技資料防洩露解決方案① | 資料識別及分類分級
- 為資料安全護航,袋鼠雲在資料分類分級上的探索實踐
- 蕪湖人社×美創科技,人社局資料安全管理制度與資料分類分級建設
- 資料庫分類有哪些資料庫
- Excel資料分類彙總Excel
- 一文詳解|高校到底如何開展資料分類分級?
- 資料庫分類統計、分組查詢資料庫
- 資料庫治理利器:動態讀寫分離資料庫
- 《資料安全法》第二十一條【資料分類分級保護】 解讀與合規實踐探究
- 棉花病害影像分類資料集
- 水稻病害影像分類資料集
- 資料治理之資料梳理與建模
- 技術洞察ㅣ美創科技人社資料分類分級最佳實踐
- 表現與資料分離
- 資料治理的興與衰,如何進行資料治理?
- 大資料資料庫讀寫分離分庫分表大資料資料庫
- 邁出資料安全建設的第一步|公安資料分類分級建設案例實踐
- SAP MM 物料主資料分類檢視的資料會帶入批次分類檢視裡?
- 百億級資料 分庫分表 後怎麼分頁查詢?
- 八大資料結構分類大資料資料結構
- 資料治理之資料的“管”與“用”
- 百億級資料分表後怎麼分頁查詢?
- 貝聊億級資料庫分庫分表實踐資料庫
- 資料劃分
- 分組資料
- 分庫分表插入資料
- 資料庫分庫分表資料庫
- 基於分類分級的醫療臨床資料合規共享與安全防護建設實踐
- 資料治理下半場:需求升級與格局突變
- 大資料分類和架構簡介大資料架構