數(shù)據(jù)治理是由企業(yè)數(shù)據(jù)治理部門發(fā)起實施的一系列政策和流程,關(guān)于如何制定和實施整個企業(yè)內(nèi)部數(shù)據(jù)的業(yè)務(wù)應(yīng)用和技術(shù)管理。其最終目的是挖掘數(shù)據(jù)價值,促進業(yè)務(wù)發(fā)展,實現(xiàn)盈利。數(shù)據(jù)治理的對象包括數(shù)據(jù)、開發(fā)過程、管理過程、系統(tǒng)和組織。數(shù)據(jù)治理是通過一套完整的管理行為,將關(guān)聯(lián)方形成有序的工作來實現(xiàn)目標(biāo)。
一、數(shù)據(jù)治理的必要性及其解決的問題
1、平臺間信息不一致:平臺間數(shù)據(jù)標(biāo)準(zhǔn)不一,缺少全局規(guī)范文檔,信息無法對接應(yīng)用
同一條記錄在不同平臺錄入時數(shù)據(jù)格式、數(shù)值精確度等不一致,甚至名稱、編號也有差別,數(shù)據(jù)在對接核對時就會出現(xiàn)混亂。
2、缺乏統(tǒng)一管理:IT系統(tǒng)建設(shè)缺乏統(tǒng)一的管理規(guī)范,無法從源頭上解決信息混亂問題
系統(tǒng)建設(shè)時局限于部門需求,沒有從業(yè)務(wù)全流程角度進行規(guī)劃,導(dǎo)致平臺系統(tǒng)分布零散、功能重復(fù),權(quán)限管理不統(tǒng)一等問題。
3、系統(tǒng)間相互割裂:企業(yè)內(nèi)部IT系統(tǒng)呈現(xiàn)孤島化,信息無法流轉(zhuǎn)
由于IT系統(tǒng)之間的相互割裂,當(dāng)一項工作需要多部門配合時,同一個信息在不同系統(tǒng)錄入時往往需要手工銜接,容易出現(xiàn)關(guān)鍵信息傳遞出錯、信息遺漏等問題。
二、DAMA數(shù)據(jù)治理體系
1)元數(shù)據(jù)管理:集成、控制和提供元數(shù)據(jù);
2)
數(shù)據(jù)質(zhì)量管理:定義、監(jiān)控和提高數(shù)據(jù)質(zhì)量;
3)數(shù)據(jù)架構(gòu)管理:定義企業(yè)數(shù)據(jù)需求,設(shè)計實現(xiàn)數(shù)據(jù)需求的藍圖;
4)數(shù)據(jù)開發(fā):設(shè)計、實施并維護解決方案,實現(xiàn)企業(yè)數(shù)據(jù)需求;
5)數(shù)據(jù)操作管理:數(shù)據(jù)庫設(shè)計、實施和支持;
6)數(shù)據(jù)安全管理:確保隱私、機密性和合適的訪問控制;
7)文檔和內(nèi)容管理:管理數(shù)據(jù)庫之外的非結(jié)構(gòu)化數(shù)據(jù);
8)參考數(shù)據(jù)和主數(shù)據(jù)管理:管理珍貴版本和復(fù)制品;
9)數(shù)據(jù)倉庫和商務(wù)智能管理:支持報表處理和分析。
三、數(shù)據(jù)治理關(guān)鍵步驟
1、數(shù)據(jù)匯總,梳理編目
建立匯總處理機制,匯總自然資源中包含的一系列數(shù)據(jù)。提供跨網(wǎng)絡(luò)跨數(shù)據(jù)庫的數(shù)據(jù)交換工具,關(guān)聯(lián)原始數(shù)據(jù)源,提取所需數(shù)據(jù)并落入核心數(shù)據(jù)庫。匯總后,形成統(tǒng)一的數(shù)據(jù)市場,以服務(wù)的形式共享數(shù)據(jù)資源。并對現(xiàn)有數(shù)據(jù)進行梳理和編目,對每個數(shù)據(jù)進行梳理后賦予唯一的數(shù)據(jù)地址,方便后續(xù)在系統(tǒng)中查找所需數(shù)據(jù)。
2、構(gòu)建數(shù)據(jù)評價體系,注重應(yīng)用反饋評價
梳理數(shù)據(jù)評價主題,構(gòu)建數(shù)據(jù)評價規(guī)則和模型,形成數(shù)據(jù)評價體系。畫像和聚焦數(shù)據(jù),評估每個業(yè)務(wù)場景需要哪些數(shù)據(jù)支持。以業(yè)務(wù)應(yīng)用程序的數(shù)據(jù)支持要求為導(dǎo)向,收集不同角色用戶的數(shù)據(jù)使用反饋,了解數(shù)據(jù)的使用和可能的優(yōu)化方向,分析和評估業(yè)務(wù)閉環(huán)中的數(shù)據(jù)支持。
3、構(gòu)建元數(shù)據(jù)系統(tǒng)和數(shù)據(jù)標(biāo)簽
建立基本數(shù)據(jù)描述、數(shù)據(jù)質(zhì)量描述、數(shù)據(jù)分類描述、其他擴展描述等維度的元數(shù)據(jù)標(biāo)準(zhǔn)體系。使用元數(shù)據(jù)描述數(shù)據(jù)可以讓每個使用數(shù)據(jù)的人清楚地了解數(shù)據(jù)的時間、空間、來源、格式等信息。結(jié)合元數(shù)據(jù)標(biāo)準(zhǔn),對數(shù)據(jù)進行標(biāo)簽處理,即對數(shù)據(jù)內(nèi)容形成畫像。在此基礎(chǔ)上,利用機器自動檢查現(xiàn)有數(shù)據(jù),包括圖形、空間、時間、邏輯一致性和冗余清洗。
4、梳理數(shù)據(jù)應(yīng)用框架,構(gòu)建指標(biāo)模型系統(tǒng)
梳理數(shù)據(jù)應(yīng)用框架,澄清數(shù)據(jù)之間的關(guān)聯(lián),明確各種數(shù)據(jù)的治理方向,形成數(shù)據(jù)應(yīng)用清單。利用可視化數(shù)據(jù)模型定制工具和數(shù)據(jù)模型發(fā)布管理工具,將數(shù)據(jù)模型固化并落入系統(tǒng),實現(xiàn)模型管理。
5、構(gòu)建全方位數(shù)據(jù)運營機,建立業(yè)務(wù)數(shù)據(jù)雙向互動機制
基于業(yè)務(wù)構(gòu)建數(shù)據(jù)生命周期,建立可持續(xù)、全面的數(shù)據(jù)運行機制。數(shù)據(jù)系統(tǒng)運行機制的核心最終是實現(xiàn)與業(yè)務(wù)數(shù)據(jù)相關(guān)的模型,通過相關(guān)模型建立業(yè)務(wù)和數(shù)據(jù)之間的雙向互動機制,以數(shù)據(jù)為導(dǎo)向完成業(yè)務(wù)的關(guān)鍵環(huán)節(jié)。