數(shù)據(jù)管理通過規(guī)范數(shù)據(jù)采集,、加工,、使用過程,在企業(yè)釋放數(shù)據(jù)價值的過程中扮演了“承上啟下”的關鍵角色,,是企業(yè)豐富數(shù)據(jù)應用,、參與數(shù)據(jù)要素流通的前序基礎,。由于數(shù)據(jù)管理屬于投入多、見效較慢的基礎性工作,,前期僅資源充足的數(shù)字原生企業(yè)對于數(shù)據(jù)管理工作的推進速度較快,。近年來,在政策支持下,,各領域企業(yè)的數(shù)據(jù)管理意識和能力不斷增強,,越來越多的企業(yè)開始從頂層統(tǒng)籌規(guī)劃數(shù)據(jù)管理工作,我國數(shù)據(jù)管理能力建設呈現(xiàn)大規(guī)模落地態(tài)勢,。本章將介紹數(shù)據(jù)管理領域的發(fā)展歷程,、當前現(xiàn)狀、主要特征和趨勢展望,。 (一)政策驅動行業(yè)實踐日益成熟各領域政策為數(shù)據(jù)管理落地注入強勁動能,。通信領域,工業(yè)和信息化部于2021年11月發(fā)布了《“十四五”信息通信行業(yè)發(fā)展規(guī)劃》,,提出加強數(shù)據(jù)資源管理,,探索建立數(shù)據(jù)應用處理、數(shù)據(jù)產(chǎn)品標準化,、數(shù)據(jù)確權,、數(shù)據(jù)定價、數(shù)據(jù)交易信任,、數(shù)據(jù)開放利用全流程的數(shù)據(jù)資源管理制度體系,。制造業(yè)領域,工業(yè)和信息化部于2021年11月印發(fā)了《“十四五”信息化和工業(yè)化深度融合發(fā)展規(guī)劃》,,提出強化大數(shù)據(jù)在制造業(yè)各環(huán)節(jié)應用,,制定制造業(yè)數(shù)字化轉型行動計劃,以制造業(yè)數(shù)字化轉型為引領,,培育專業(yè)化,、場景化大數(shù)據(jù)解決方案。金融領域,,央行于2022年1月發(fā)布了《金融科技發(fā)展規(guī)劃(2022-2025年)》,,要求全面加強數(shù)據(jù)能力建設。銀保監(jiān)會于同期發(fā)布了《關于銀行保險業(yè)數(shù)字化轉型的指導意見》,,提出健全數(shù)據(jù)治理體系,,增強數(shù)據(jù)管理能力,加強數(shù)據(jù)質量控制,,提高數(shù)據(jù)應用能力,。其他領域,交通運輸部于2021年10月印發(fā)《數(shù)字交通“十四五”發(fā)展規(guī)劃》,,農(nóng)業(yè)農(nóng)村部于2022年8月發(fā)布《農(nóng)業(yè)現(xiàn)代化示范區(qū)數(shù)字化建設指南》,,提出加大數(shù)據(jù)治理力度,,完善數(shù)據(jù)質量管控,推動數(shù)字交通,、數(shù)字鄉(xiāng)村等領域發(fā)展,。 行業(yè)、地方大力推動DCMM貫標評估,,通過“以評促建”的方式提升數(shù)據(jù)管理能力,。工業(yè)和信息化部信息技術發(fā)展司組織協(xié)調全國信息技術標準化技術委員會(TC28)于2014年開始了我國數(shù)據(jù)管理國家標準研制工作,于2018年發(fā)布了《數(shù)據(jù)管理能力成熟度評估模型》(Data management capability maturity assessment model,,簡稱DCMM),,從組織、制度,、技術,、人員等方面綜合評價企業(yè)數(shù)據(jù)管理水平。DCMM評估自2020年啟動,,河北,、天津、無錫等20余省市相繼發(fā)布針對性支持政策,,有力地推動了全國DCMM貫標活動的快速發(fā)展,,2022年全年共完成企業(yè)貫標評估1040家,有效提高企業(yè)數(shù)據(jù)管理能力,、促進數(shù)據(jù)要素價值釋放。參評企業(yè)分布于全國各地,,企業(yè)類型覆蓋軟件和信息技術服務業(yè),、制造業(yè),、銀行業(yè),、電力業(yè)、通信業(yè)等多個行業(yè),。 頭部企業(yè)數(shù)據(jù)管理工作已經(jīng)進入深水期,,但大部分企業(yè)仍處于數(shù)據(jù)管理初期。中國電子信息行業(yè)聯(lián)合會DCMM評估統(tǒng)計結果顯示,,現(xiàn)階段通信業(yè),、銀行業(yè)、電力業(yè)數(shù)據(jù)管理能力相對領先,,逐漸邁入深水區(qū),,以上3個行業(yè)DCMM評分普遍在3級以上,通信業(yè)4級占比超過了60%,,銀行業(yè)3級占比接近70%,,電力業(yè)3級和4級累計占比達到85%,。軟件和信息技術業(yè)、制造業(yè)數(shù)據(jù)管理能力相對薄弱,,以上兩個行業(yè)集中于2級和3級,,同時2級比例遠高于3級,其中軟件和信息技術業(yè)的2級占比是3級2倍以上,,累計占比達到97%,,制造業(yè)的2級占比接近3級的5倍,,累計占比達到98%,。 (二)當前數(shù)據(jù)管理發(fā)展呈現(xiàn)四大特點頭部企業(yè)數(shù)據(jù)管理起步較早,數(shù)據(jù)管理能力相對成熟,,管理方法和模式對于發(fā)展初期的企業(yè)具有良好的參考價值。宏觀管理層面,,成立了專門數(shù)據(jù)管理團隊,,發(fā)布獨立數(shù)據(jù)戰(zhàn)略規(guī)劃,,提升數(shù)據(jù)管理專業(yè)性,;微觀執(zhí)行層面,強化數(shù)據(jù)供給能力,,全面提高數(shù)據(jù)質量水平,,依托統(tǒng)一數(shù)據(jù)管理平臺,提高數(shù)據(jù)管理效率,。 1. 通過成立專職團隊增強數(shù)據(jù)管理執(zhí)行效率 為推動數(shù)據(jù)管理有效開展,,越來越多的企業(yè)成立統(tǒng)一數(shù)據(jù)管理歸口部門,形成了決策,、管理,、執(zhí)行的數(shù)據(jù)管理三層架構組織,并設置了專門的數(shù)據(jù)管理崗位,,建立了數(shù)據(jù)部門,、技術部門和業(yè)務部門協(xié)同機制。例如,,中國移動成立IT管委會統(tǒng)籌數(shù)據(jù)管理制度,、標準,、流程,,信息技術中心牽頭全網(wǎng)各域數(shù)據(jù)治理和平臺建設,,并加掛大數(shù)據(jù)中心負責大數(shù)據(jù)管理和運營,與各業(yè)務部門及省專單位數(shù)據(jù)“管,、建,、戰(zhàn)”協(xié)同。中國聯(lián)通在集團成立了數(shù)字化轉型部門,,統(tǒng)籌負責數(shù)據(jù)管理工作,,在網(wǎng)絡域、管理域,、客戶域的業(yè)務部門,、市場部、分子公司指定了數(shù)據(jù)管理對接人,,由聯(lián)通軟研院承擔數(shù)據(jù)管理技術平臺開發(fā)和運維工作,。工商銀行在金融科技委員會下設數(shù)據(jù)治理委員會作為決策層,數(shù)據(jù)管理部/信息管理部作為管理層,,大數(shù)據(jù)中心/軟件開發(fā)中心提供技術支持,,核心業(yè)務部門負責數(shù)據(jù)采集和數(shù)據(jù)應用,負責執(zhí)行具體數(shù)據(jù)管理工作,。 來源:中國信息通信研究院 圖1 數(shù)據(jù)管理組織架構示意圖 2. 通過發(fā)布獨立規(guī)劃推動數(shù)據(jù)管理精準開展 在企業(yè)紛紛發(fā)布數(shù)字化轉型整體戰(zhàn)略基礎上,,為精準提升數(shù)據(jù)管理工作的質量和效率,越來越多的企業(yè)發(fā)布了獨立的數(shù)據(jù)管理戰(zhàn)略規(guī)劃,,從而確立數(shù)據(jù)管理工作的中長期目標和管理活動優(yōu)先級,,明確需要的資源投入總量和資源分配機制,指導數(shù)據(jù)管理團隊的工作有效執(zhí)行,。例如中國電信集團2021年發(fā)布了《中國電信數(shù)據(jù)治理體系化推進工作指引》,,旨在結合“云改數(shù)轉”數(shù)字化轉型整體思路推動數(shù)據(jù)管理工作體系化開展,指導集團下各單位從數(shù)據(jù)模型管理,、數(shù)據(jù)質量管理,、數(shù)據(jù)安全管理、數(shù)據(jù)共享等方面推進數(shù)據(jù)治理工作高效開展,。 3. 通過開展專項行動進一步提升數(shù)據(jù)供給質量 良好的數(shù)據(jù)供給能力是數(shù)據(jù)分析挖掘的基礎,,在工業(yè)物聯(lián)網(wǎng)、工業(yè)互聯(lián)網(wǎng),、邊緣計算等技術快速發(fā)展的背景下,企業(yè)業(yè)務線上化加速,、數(shù)據(jù)規(guī)模爆炸性增長,,如何保障數(shù)據(jù)質量水平、增強數(shù)據(jù)可信可用成為了數(shù)據(jù)管理的關鍵一步,。以南方電網(wǎng)為例,,數(shù)據(jù)量從“十三五”初期的220TB提升至2.4PB,,數(shù)據(jù)采集范圍拓展至競爭性業(yè)務、金融業(yè)務等板塊,,關鍵運行數(shù)據(jù)采集頻率提升超過60倍,。在數(shù)據(jù)源頭快速變化的背景下,南方電網(wǎng)在常態(tài)化數(shù)據(jù)質量治理的基礎上開展數(shù)據(jù)質量提升專項,,短時間內,、集中資源力量打通數(shù)據(jù)質量工作的難點、堵點,,在主配網(wǎng)數(shù)據(jù)治理領域,,形成配網(wǎng)數(shù)據(jù)問題識別規(guī)則14項,累計識別并整改2100余萬條數(shù)據(jù)質量問題,,全網(wǎng)各單位變電站輪廓坐標,、桿塔坐標準確率達到99%。 4. 通過統(tǒng)一技術平臺消除數(shù)據(jù)管理協(xié)同難點 早期,,各企業(yè)針對數(shù)據(jù)管理中的各項工作,,逐步建設了數(shù)據(jù)標準管理平臺、數(shù)據(jù)質量管理平臺,、數(shù)據(jù)架構管理平臺,、元數(shù)據(jù)管理平臺、主數(shù)據(jù)管理平臺等單一功能型技術工具,,這些技術工具通常獨立存在,,使得數(shù)據(jù)管理各項活動間銜接性較差,例如數(shù)據(jù)標準難以應用于數(shù)據(jù)模型,、數(shù)據(jù)質量難以從源頭把控等,,導致管理資源的冗余和浪費。隨著統(tǒng)一數(shù)據(jù)管理平臺的成熟,,其將各單一功能型技術工具進行集成,,構建了數(shù)據(jù)管理工作的“一站式”技術平臺,對于統(tǒng)籌數(shù)據(jù)管理工作,、提高數(shù)據(jù)管理效率的作用日益突出,。例如中國移動構建了元數(shù)據(jù)驅動的統(tǒng)一數(shù)據(jù)治理平臺,全面拉通異構跨地域跨平臺的元數(shù)據(jù),,統(tǒng)一支撐數(shù)據(jù)管理,、開發(fā)、運營,、運維人員的數(shù)據(jù)治理工作,,實現(xiàn)數(shù)據(jù)一點可看、可控、可管,。國網(wǎng)大數(shù)據(jù)中心基于統(tǒng)一數(shù)據(jù)管理技術平臺,,實現(xiàn)總部及27家省(市)公司PB級數(shù)據(jù)的統(tǒng)一管理,,有效加快電網(wǎng)整體數(shù)字化轉型升級,。 (三)數(shù)據(jù)管理面臨的主要挑戰(zhàn)與發(fā)展趨勢 目前企業(yè)在數(shù)據(jù)管理方面仍然面臨三點挑戰(zhàn)。一是數(shù)據(jù)的業(yè)務價值不顯著,,數(shù)據(jù)管理內驅動力不足,。推動業(yè)務創(chuàng)新和發(fā)展是數(shù)據(jù)價值的最終目標,由于企業(yè)缺乏對數(shù)據(jù)產(chǎn)生業(yè)務價值進行度量的體系,,導致企業(yè)決策層,、管理層和業(yè)務部門難以對數(shù)據(jù)價值有效感知,進一步降低了企業(yè)持續(xù)開展數(shù)據(jù)管理的動力,。二是數(shù)據(jù),、IT和業(yè)務仍存在割裂,組織架構亟需變革調整,。盡管越來越多的企業(yè)成立專門的數(shù)據(jù)管理團隊,,但是尚未明確數(shù)據(jù)管理團隊與IT團隊、業(yè)務團隊的協(xié)作機制,,導致數(shù)據(jù)管理與企業(yè)信息化建設和業(yè)務發(fā)展脫節(jié),,阻礙了數(shù)據(jù)管理成果在企業(yè)系統(tǒng)和業(yè)務場景的落地。三是數(shù)據(jù)管理人才缺失,,數(shù)據(jù)管理推進后勁不足,。由于數(shù)據(jù)管理是一個新興領域,有別于傳統(tǒng)的數(shù)據(jù)庫和計算機領域,,需要的是具備管理能力,、技術能力和業(yè)務能力的復合型人才,因此面臨較大缺口,。 未來,,數(shù)據(jù)管理領域呈現(xiàn)以下三點趨勢。 一是首席數(shù)據(jù)官(Chief Data Officer ,CDO)制度將助力企業(yè)全面開展數(shù)據(jù)管理,。CDO是有效管理和運用企業(yè)數(shù)據(jù)資源,、充分挖掘數(shù)據(jù)價值、驅動業(yè)務創(chuàng)新和轉型變革的企業(yè)負責人,,負責為公司制定一個明確的數(shù)字化戰(zhàn)略,,確保相關舉措都獲得資源分配,并通過衡量數(shù)字項目投資回報率的方式,,提高客戶參與度和忠誠度,,推動企業(yè)形成數(shù)據(jù)管理良性閉環(huán)。事實上,,在過去的幾年里,,國外已有包括通用電氣、富國銀行在內的眾多企業(yè)設置了CDO崗位,,全面推動企業(yè)數(shù)字化轉型,。國內廣東省于2022年在政府工作報告重點任務分工方案明確提出,要“出臺企業(yè)首席數(shù)據(jù)官建設指南”,,鼓勵具備條件的企業(yè)在決策層設立CDO,,按照“企業(yè)主導、政府推動,、價值優(yōu)先,、多方協(xié)同”的建設原則組織實施。 二是數(shù)據(jù)研發(fā)運營一體化(DataOps)將有效提升數(shù)據(jù)管理協(xié)同效率,。隨著數(shù)據(jù)應用場景日益豐富帶來數(shù)據(jù)分析需求快速變化,,數(shù)據(jù)工程師、數(shù)據(jù)管理員,、報表開發(fā)人員,、運維工程師在內的各類數(shù)據(jù)管理角色逐漸增多,導致企業(yè)各類數(shù)據(jù)交付任務難度大大增加,。DataOps旨在打破數(shù)據(jù)管理各環(huán)節(jié)之間的割裂,,將數(shù)據(jù)質量達標率、數(shù)據(jù)標準落標率,、數(shù)據(jù)架構符合度,、數(shù)據(jù)安全滿足度等指標作為數(shù)據(jù)設計、開發(fā)和測試的要求,,優(yōu)化數(shù)據(jù)生產(chǎn)者和數(shù)據(jù)消費者協(xié)作效率,,并通過標準化大數(shù)據(jù)組件,構建一體化平臺打通數(shù)據(jù)設計,、開發(fā),、測試和運維各環(huán)節(jié),實現(xiàn)編寫代碼,、生產(chǎn)部署,、調度監(jiān)控全過程線上化,引入可視化編排,、CI/CD等技術降低數(shù)據(jù)研發(fā)技術門檻,,推動敏態(tài)數(shù)據(jù)研發(fā),提高數(shù)據(jù)運維質量,。 三是提高智能化程度將成為降低數(shù)據(jù)管理成本的關鍵,。通過利用AI、ML、RPA,、語義分析,、可視化等技術,自動識別或匹配數(shù)據(jù)規(guī)則(包括數(shù)據(jù)標準規(guī)則,、數(shù)據(jù)質量規(guī)則,、數(shù)據(jù)安全規(guī)則等),自動執(zhí)行數(shù)據(jù)規(guī)則校驗,,自動發(fā)現(xiàn)數(shù)據(jù)之間的關聯(lián)關系,,并以可視化的方式展現(xiàn)。此外,,利用VR,、AR、3D可視化等技術,,幫助數(shù)據(jù)使用者探索數(shù)據(jù)和挖掘數(shù)據(jù),,提升數(shù)據(jù)應用的趣味性,降低數(shù)據(jù)使用門檻,。 本文節(jié)選自中國信通院在第五屆“數(shù)據(jù)資產(chǎn)管理大會”上發(fā)布的《大數(shù)據(jù)白皮書(2022年)》,。 報告介紹及全文下載鏈接如下: |
|