圖 1|數(shù)據(jù)治理平臺(tái)能力架構(gòu)

按七個(gè)步驟推進(jìn)數(shù)據(jù)資源化

先從完整性、準(zhǔn)確性、一致性和可用性等維度開(kāi)展質(zhì)量評(píng)估,再接入不同來(lái)源和結(jié)構(gòu)的數(shù)據(jù)。數(shù)據(jù)經(jīng)過(guò)清洗、質(zhì)檢和檢驗(yàn)校驗(yàn)后進(jìn)行融合,形成主題庫(kù)或?qū)n}庫(kù),并結(jié)合數(shù)據(jù)資源目錄和生命周期要求完成歸檔存儲(chǔ)。

2222.png

圖 2|數(shù)據(jù)資源化七步治理流程

把標(biāo)準(zhǔn)、元數(shù)據(jù)和質(zhì)量規(guī)則落到治理過(guò)程

數(shù)據(jù)標(biāo)準(zhǔn)管理用于維護(hù)標(biāo)準(zhǔn)、映射關(guān)系和數(shù)據(jù)字典;元數(shù)據(jù)管理用于采集數(shù)據(jù)定義、關(guān)系和血緣;質(zhì)量管理結(jié)合知識(shí)庫(kù)、規(guī)則管理、質(zhì)量監(jiān)控和問(wèn)題追蹤,對(duì)清洗結(jié)果及業(yè)務(wù)規(guī)則執(zhí)行情況持續(xù)檢查。安全管理覆蓋認(rèn)證授權(quán)、訪問(wèn)控制、數(shù)據(jù)審計(jì)、脫敏和加密,適用范圍待確認(rèn)。

3333.png

圖 3|數(shù)據(jù)質(zhì)量管理閉環(huán)

通過(guò)目錄、地圖和統(tǒng)一服務(wù)提高數(shù)據(jù)可用性

數(shù)據(jù)資產(chǎn)門(mén)戶、數(shù)據(jù)地圖和數(shù)據(jù)目錄用于定位數(shù)據(jù)及其基本信息,ODS、DWD、DWS和DM等分層承接貼源、明細(xì)、匯總和數(shù)據(jù)集市數(shù)據(jù)。面向應(yīng)用側(cè),通過(guò)API管理、配置管理、服務(wù)編排、訪問(wèn)控制和服務(wù)審計(jì)統(tǒng)一發(fā)布數(shù)據(jù)服務(wù),支持管理會(huì)計(jì)、經(jīng)營(yíng)分析、風(fēng)險(xiǎn)預(yù)警等數(shù)據(jù)應(yīng)用。

4444.png

圖 4|數(shù)據(jù)資產(chǎn)發(fā)現(xiàn)與服務(wù)路徑

實(shí)施路徑

  1. 確認(rèn)治理邊界與數(shù)據(jù)現(xiàn)狀

    梳理參與部門(mén)、業(yè)務(wù)范圍、現(xiàn)有系統(tǒng)、數(shù)據(jù)來(lái)源、數(shù)據(jù)結(jié)構(gòu)、更新方式和使用場(chǎng)景,形成數(shù)據(jù)源與數(shù)據(jù)資源清單,明確先后順序

  2. 設(shè)計(jì)數(shù)據(jù)標(biāo)準(zhǔn)和目標(biāo)架構(gòu)

    確定數(shù)據(jù)分類(lèi)、編碼、字段定義、數(shù)據(jù)字典、標(biāo)準(zhǔn)映射、存儲(chǔ)分層和主題域,明確采集、治理、服務(wù)與應(yīng)用之間的關(guān)系

  3. 建設(shè)數(shù)據(jù)接入和存儲(chǔ)鏈路

    按確認(rèn)范圍配置流式采集、數(shù)據(jù)集成、數(shù)據(jù)適配和轉(zhuǎn)換流程,將數(shù)據(jù)歸集到貼源、明細(xì)、匯總及數(shù)據(jù)集市等存儲(chǔ)層

  4. 執(zhí)行清洗、質(zhì)檢和校驗(yàn)

    依據(jù)質(zhì)量評(píng)估結(jié)果配置去重、異常處理、格式轉(zhuǎn)換、業(yè)務(wù)規(guī)則檢查、數(shù)量核對(duì)和來(lái)源比對(duì),記錄質(zhì)量問(wèn)題及處理結(jié)果

  5. 完善元數(shù)據(jù)、目錄與治理能力

    采集元數(shù)據(jù)和血緣關(guān)系,建設(shè)數(shù)據(jù)目錄、數(shù)據(jù)地圖、指標(biāo)和標(biāo)簽?zāi)芰Γ创_認(rèn)的權(quán)限范圍配置數(shù)據(jù)安全規(guī)則

  6. 發(fā)布數(shù)據(jù)服務(wù)并銜接應(yīng)用

    梳理應(yīng)用取數(shù)需求,配置API、服務(wù)編排、訪問(wèn)控制、服務(wù)推送和審計(jì)規(guī)則,將治理后的數(shù)據(jù)按權(quán)限提供給業(yè)務(wù)應(yīng)用

主要交付