數(shù)據(jù)治理的目的是什么
數(shù)據(jù)治理的目的
數(shù)據(jù)是企業(yè)核心資產(chǎn)，企業(yè)需要建立起數(shù)據(jù)字典，有效管理其日益重要的數(shù)據(jù)和信息資源；同時(shí)建立數(shù)據(jù)持續(xù)改進(jìn)機(jī)制，來不斷提升數(shù)據(jù)質(zhì)量。數(shù)據(jù)的價(jià)值和風(fēng)險(xiǎn)應(yīng)被有效管理，以支撐企業(yè)管理簡化、業(yè)務(wù)流集成、運(yùn)營效率提升和經(jīng)營結(jié)果的真實(shí)呈現(xiàn)。數(shù)據(jù)準(zhǔn)確是科學(xué)決策的基礎(chǔ)，數(shù)據(jù)架構(gòu)和標(biāo)準(zhǔn)的統(tǒng)一是全流程高效運(yùn)作、語言一致的前提。
當(dāng)前企業(yè)數(shù)據(jù)面臨很多的問題：沒有統(tǒng)一的數(shù)據(jù)標(biāo)準(zhǔn)，各業(yè)務(wù)系統(tǒng)間數(shù)據(jù)無法充分共享，關(guān)鍵核心數(shù)據(jù)無法識別及跨系統(tǒng)無法拉通等。為有效管理企業(yè)數(shù)據(jù)資產(chǎn)，實(shí)現(xiàn)數(shù)據(jù)價(jià)值的最大化，急需建立一個(gè)完善的數(shù)據(jù)治理框架體系，為企業(yè)數(shù)字化轉(zhuǎn)型打下堅(jiān)實(shí)的數(shù)據(jù)基礎(chǔ)。
對于華為數(shù)據(jù)使能服務(wù)DAYU，DAYU數(shù)據(jù)治理方法論是華為數(shù)據(jù)管理方法論的精華總結(jié)，參考了業(yè)界數(shù)據(jù)治理最佳實(shí)踐，并結(jié)合華為數(shù)字化轉(zhuǎn)型成功經(jīng)驗(yàn)優(yōu)化而成。本文旨在幫助客戶持續(xù)完善數(shù)據(jù)管理體系，沿企業(yè)主業(yè)務(wù)流打通信息鏈和數(shù)據(jù)流，提升數(shù)據(jù)質(zhì)量，實(shí)現(xiàn)數(shù)據(jù)“清潔”，以支撐運(yùn)營效率提升和經(jīng)營結(jié)果的真實(shí)呈現(xiàn)，實(shí)現(xiàn)智慧數(shù)據(jù)驅(qū)動有效增長，充分實(shí)現(xiàn)數(shù)據(jù)資產(chǎn)價(jià)值。
數(shù)據(jù)治理的功能模塊
數(shù)據(jù)治理主要專注于如下模塊域：
數(shù)據(jù)集成
數(shù)據(jù)集成用來完成數(shù)據(jù)入湖動作，不是簡單的數(shù)據(jù)搬家，而是按照一定的方法論進(jìn)行數(shù)據(jù)備份。數(shù)據(jù)入湖的前提條件是滿足6項(xiàng)數(shù)據(jù)標(biāo)準(zhǔn)，包括：明確數(shù)據(jù)Owner、發(fā)布數(shù)據(jù)標(biāo)準(zhǔn)、定義數(shù)據(jù)密級、明確數(shù)據(jù)源、數(shù)據(jù)質(zhì)量評估、元數(shù)據(jù)注冊。此標(biāo)準(zhǔn)由數(shù)據(jù)代表在入湖前完成梳理并在數(shù)據(jù)治理平臺上進(jìn)行資產(chǎn)注冊。
數(shù)據(jù)標(biāo)準(zhǔn)
數(shù)據(jù)標(biāo)準(zhǔn)管理著重建立統(tǒng)一的數(shù)據(jù)語言，L1到L5數(shù)據(jù)層級業(yè)務(wù)對象的定義是數(shù)據(jù)標(biāo)準(zhǔn)的載體，并對應(yīng)發(fā)布包括L1到L5數(shù)據(jù)層級的數(shù)據(jù)標(biāo)準(zhǔn)。各業(yè)務(wù)對象對應(yīng)物理實(shí)現(xiàn)的IT系統(tǒng)需發(fā)布相應(yīng)的數(shù)據(jù)字典并進(jìn)行數(shù)據(jù)源認(rèn)證。而對于梳理出來，但沒有落IT系統(tǒng)的業(yè)務(wù)對象，需在后繼的開發(fā)中進(jìn)行數(shù)字化落地。
數(shù)據(jù)開發(fā)
數(shù)據(jù)開發(fā)是編排、調(diào)度和運(yùn)維的中心，數(shù)據(jù)開發(fā)是一個(gè)提供分析、設(shè)計(jì)、實(shí)施、部署及維護(hù)一站式數(shù)據(jù)解決方案，完成數(shù)據(jù)加工、轉(zhuǎn)換和質(zhì)量提升等。數(shù)據(jù)開發(fā)屏蔽了各種數(shù)據(jù)存儲的差異，一站式滿足從數(shù)據(jù)集成、數(shù)據(jù)清洗/轉(zhuǎn)換、數(shù)據(jù)質(zhì)量監(jiān)控等全流程的數(shù)據(jù)處理，是數(shù)據(jù)治理實(shí)施的主戰(zhàn)場。
數(shù)據(jù)質(zhì)量
數(shù)據(jù)質(zhì)量管理的目標(biāo)在于保證數(shù)據(jù)滿足使用的要求。數(shù)據(jù)標(biāo)準(zhǔn)是衡量數(shù)據(jù)質(zhì)量最基本的基準(zhǔn)。數(shù)據(jù)質(zhì)量要求各業(yè)務(wù)部門對相應(yīng)數(shù)據(jù)領(lǐng)域的數(shù)據(jù)質(zhì)量全權(quán)負(fù)責(zé)，按業(yè)務(wù)需求設(shè)計(jì)數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)，制定數(shù)據(jù)質(zhì)量管控目標(biāo)，并遵循企業(yè)數(shù)據(jù)治理要求進(jìn)行數(shù)據(jù)質(zhì)量度量，制定符合各自業(yè)務(wù)情況的數(shù)據(jù)質(zhì)量政策及數(shù)據(jù)質(zhì)量相關(guān)的改進(jìn)計(jì)劃，持續(xù)進(jìn)行數(shù)據(jù)質(zhì)量管控。
數(shù)據(jù)資產(chǎn)
數(shù)據(jù)資產(chǎn)包括業(yè)務(wù)資產(chǎn)、技術(shù)資產(chǎn)、指標(biāo)資產(chǎn)等。數(shù)據(jù)資產(chǎn)管理是數(shù)據(jù)治理的重要支撐手段，核心是構(gòu)建企業(yè)級的元數(shù)據(jù)管理中心、建立數(shù)據(jù)資產(chǎn)目錄、建立數(shù)據(jù)搜索引擎、實(shí)現(xiàn)數(shù)據(jù)血緣和數(shù)據(jù)全景可視。其中元數(shù)據(jù)包括業(yè)務(wù)元數(shù)據(jù)、技術(shù)元數(shù)據(jù)和操作元數(shù)據(jù)，要求將企業(yè)所有概念數(shù)據(jù)模型、邏輯數(shù)據(jù)模型以及物理數(shù)據(jù)模型系統(tǒng)化地管理起來，同時(shí)建設(shè)企業(yè)數(shù)據(jù)地圖及數(shù)據(jù)血緣關(guān)系，為數(shù)據(jù)調(diào)用、數(shù)據(jù)服務(wù)、數(shù)據(jù)運(yùn)營及運(yùn)維提供強(qiáng)有力的信息支撐。
數(shù)據(jù)服務(wù)
數(shù)據(jù)服務(wù)通過在整個(gè)企業(yè)范圍統(tǒng)一數(shù)據(jù)服務(wù)設(shè)計(jì)和實(shí)現(xiàn)的規(guī)范并進(jìn)行數(shù)據(jù)服務(wù)生命周期管理，集約管理數(shù)據(jù)服務(wù)并減少數(shù)據(jù)調(diào)用和集成的開發(fā)成本。
數(shù)據(jù)安全
由于企業(yè)使用的數(shù)據(jù)資源，既有來自于內(nèi)部業(yè)務(wù)系統(tǒng)，所有權(quán)屬于企業(yè)的數(shù)據(jù)，同時(shí)也有來自外部的數(shù)據(jù)，必須將數(shù)據(jù)安全納入數(shù)據(jù)治理的范疇，對所有企業(yè)數(shù)據(jù)要求依據(jù)數(shù)據(jù)安全等級定義進(jìn)行數(shù)據(jù)安全定級，在數(shù)據(jù)產(chǎn)生、傳輸、存儲和使用的過程中進(jìn)行必要的數(shù)據(jù)安全訪問控制，同時(shí)對數(shù)據(jù)相應(yīng)的CRUD活動均需產(chǎn)生日志以完成安全審計(jì)。
主數(shù)據(jù)
主數(shù)據(jù)管理是數(shù)據(jù)標(biāo)準(zhǔn)落地和提升數(shù)據(jù)質(zhì)量的重要手段，是企業(yè)級數(shù)據(jù)治理的重要范疇，其目標(biāo)在于保證在企業(yè)范圍內(nèi)重要業(yè)務(wù)實(shí)體數(shù)據(jù)的一致(定義和實(shí)際物理數(shù)據(jù)的一致)。主數(shù)據(jù)管理首先進(jìn)行企業(yè)主數(shù)據(jù)的識別，然后對已識別主數(shù)據(jù)按照主數(shù)據(jù)規(guī)范要求進(jìn)行數(shù)據(jù)治理和IT改造，以支撐企業(yè)業(yè)務(wù)流和工具鏈的打通和串聯(lián)。
管理中心
數(shù)據(jù)治理的開展離不開組織、流程和政策的建設(shè)，管理中心也管理著數(shù)據(jù)治理過程中公共核心的統(tǒng)一數(shù)據(jù)源、數(shù)據(jù)駕駛艙等，滿足不同角色的用戶擁有個(gè)性化的工作臺。
數(shù)據(jù)治理框架
了解數(shù)據(jù)治理
數(shù)據(jù)治理各模塊域之間的關(guān)系
數(shù)據(jù)標(biāo)準(zhǔn)為數(shù)據(jù)開發(fā)和設(shè)計(jì)工作提供核心參考，同時(shí)也通過數(shù)據(jù)開發(fā)實(shí)現(xiàn)數(shù)據(jù)標(biāo)準(zhǔn)化落地。數(shù)據(jù)標(biāo)準(zhǔn)為數(shù)據(jù)應(yīng)用提供“一致的語言”；數(shù)據(jù)標(biāo)準(zhǔn)為主數(shù)據(jù)管理提供主數(shù)據(jù)定義的基準(zhǔn)，數(shù)據(jù)標(biāo)準(zhǔn)也是數(shù)據(jù)質(zhì)量管理策略設(shè)計(jì)、數(shù)據(jù)質(zhì)量規(guī)則制定的核心依據(jù)；數(shù)據(jù)標(biāo)準(zhǔn)所定義的密級分類和責(zé)任主體，為數(shù)據(jù)安全管理提供依據(jù)；數(shù)據(jù)標(biāo)準(zhǔn)也是數(shù)據(jù)資產(chǎn)管理重要輸入。
主數(shù)據(jù)管理通過數(shù)據(jù)開發(fā)實(shí)現(xiàn)核心數(shù)據(jù)的一致性地記錄、更新和維護(hù)，是數(shù)據(jù)質(zhì)量提升的重要手段。主數(shù)據(jù)管理保障了數(shù)據(jù)應(yīng)用和運(yùn)營過程中核心數(shù)據(jù)的存在和一致性。
數(shù)據(jù)質(zhì)量管理是數(shù)據(jù)應(yīng)用和運(yùn)營過程中數(shù)據(jù)準(zhǔn)確性、一致性、完整性、及時(shí)性、唯一性、有效性的重要保障，是數(shù)據(jù)業(yè)務(wù)價(jià)值創(chuàng)造的重要前提。
數(shù)據(jù)資產(chǎn)管理模塊完成元數(shù)據(jù)的采集和注冊，數(shù)據(jù)資產(chǎn)管理為數(shù)據(jù)應(yīng)用和數(shù)據(jù)消費(fèi)提供了解數(shù)據(jù)的窗口。
數(shù)據(jù)服務(wù)管控實(shí)現(xiàn)在數(shù)據(jù)服務(wù)開發(fā)過程中服務(wù)標(biāo)準(zhǔn)、規(guī)范、要求和管理的落實(shí)，數(shù)據(jù)服務(wù)打通數(shù)據(jù)應(yīng)用和數(shù)據(jù)消費(fèi)的物理通道。
數(shù)據(jù)安全在數(shù)據(jù)開發(fā)過程中完成數(shù)據(jù)安全的IT實(shí)現(xiàn)，以達(dá)成數(shù)據(jù)應(yīng)用過程中安全管理規(guī)范的要求。
數(shù)據(jù)治理實(shí)施方法論
數(shù)據(jù)治理實(shí)施方法論按照數(shù)據(jù)治理成熟度評估->評估現(xiàn)狀、確定目標(biāo)、分析差距->計(jì)劃制定、計(jì)劃執(zhí)行->持續(xù)監(jiān)測度量演進(jìn)的關(guān)鍵實(shí)施方法形成數(shù)據(jù)治理實(shí)施閉環(huán)流程。
這也遵循了PDCA（Plan-Do-Check-Action）循環(huán)的科學(xué)程序，同時(shí)結(jié)合數(shù)據(jù)治理工作的特點(diǎn)設(shè)計(jì)了兩個(gè)層面的數(shù)據(jù)治理度量評估工具
通過年度的整體數(shù)據(jù)治理成熟度評估，了解各維度數(shù)據(jù)治理現(xiàn)狀，并制定可操作性目標(biāo)，分析差距，制定切實(shí)可行的計(jì)劃，在推進(jìn)落實(shí)計(jì)劃的過程中，利用季度性實(shí)施的數(shù)據(jù)治理評分卡，針對性地監(jiān)測度量各業(yè)務(wù)/IT部門的數(shù)據(jù)治理情況，持續(xù)推進(jìn)各部門的數(shù)據(jù)治理水平提升，進(jìn)而提高整體數(shù)據(jù)治理成熟度。
年度進(jìn)行的整體數(shù)據(jù)治理成熟度評估，可以結(jié)合主觀及客觀調(diào)查度量，綜合反映企業(yè)當(dāng)前數(shù)據(jù)治理成熟度水平，幫助制定切實(shí)可行的數(shù)據(jù)治理整體目標(biāo)。季度性實(shí)施的數(shù)據(jù)治理評分卡是一個(gè)重要的工具手段，從一些關(guān)鍵核心維度進(jìn)行季度性迭代評分，持續(xù)促進(jìn)所有部門數(shù)據(jù)治理工作的落實(shí)提升。
數(shù)據(jù)治理度量維度
數(shù)據(jù)治理成熟度評估使用調(diào)查問卷方式，包括11個(gè)治理模塊，60多個(gè)調(diào)查問卷事項(xiàng)，全方面多維度度量了數(shù)據(jù)治理工作的水平。
數(shù)據(jù)治理評分卡使用評分卡形式，由數(shù)據(jù)治理組織和各業(yè)務(wù)IT部門共同針對各部門自身數(shù)據(jù)治理情況進(jìn)行打分。評分卡是季度性打分，作為一個(gè)工具手段持續(xù)推動促進(jìn)各部門的數(shù)據(jù)治理工作，改進(jìn)數(shù)據(jù)質(zhì)量，提升數(shù)據(jù)治理水平。
數(shù)據(jù)治理評分規(guī)則
數(shù)據(jù)治理成熟度評估分5個(gè)級別：
級別1是最低級別，數(shù)據(jù)治理處于初始級別，空白狀態(tài)，沒有相關(guān)流程及數(shù)據(jù)治理管控。
級別2是開始管理級別，仍處于匱乏狀態(tài)，沒有形成正式一致的數(shù)據(jù)治理方法。
級別3是明確定義級別，處于可改進(jìn)狀態(tài)，已經(jīng)形成了主動治理的流程和正式一致的數(shù)據(jù)治理方法。
級別4是量化管理級別，已經(jīng)步入適宜匹配狀態(tài)，貫穿組織采用的正式一致的數(shù)據(jù)治理方法都是可量化管控的。
級別5是最高級別，專注于持續(xù)優(yōu)化提升，已經(jīng)步入卓越狀態(tài)。
記分規(guī)則
數(shù)據(jù)治理評分卡對各維度度量是按5分制進(jìn)行評分，每一個(gè)度量細(xì)項(xiàng)只有得分0或得分1，如果滿足度量細(xì)項(xiàng)要求得分1，否則得分0。
針對流程7.10交付項(xiàng)目管理，數(shù)據(jù)執(zhí)行維度有6個(gè)度量細(xì)項(xiàng)，則這一度量維度的總體得分就是SUM(度量細(xì)項(xiàng)得分)*5/6。所以這一度量維度的實(shí)際得分就是(1+1+1+0+0+1)*5/6=3.3。