日日碰狠狠躁久久躁96avv-97久久超碰国产精品最新-婷婷丁香五月天在线播放,狠狠色噜噜色狠狠狠综合久久 ,爱做久久久久久,高h喷水荡肉爽文np肉色学校

首頁(yè) 行業(yè)百科 數(shù)據(jù)治理之元數(shù)據(jù)管理

數(shù)據(jù)治理之元數(shù)據(jù)管理

|億信華辰大數(shù)據(jù)知識(shí)庫(kù)2022-11-21

數(shù)據(jù)治理之元數(shù)據(jù)管理

接觸過數(shù)據(jù)分析的小伙伴應(yīng)該清楚數(shù)據(jù)治理在挖掘數(shù)據(jù)價(jià)值、促進(jìn)企業(yè)業(yè)務(wù)發(fā)展等方面的重要意義。數(shù)據(jù)治理是由企業(yè)數(shù)據(jù)治理部門發(fā)起實(shí)施的一系列政策和流程,關(guān)于如何制定和實(shí)施整個(gè)企業(yè)內(nèi)部數(shù)據(jù)的業(yè)務(wù)應(yīng)用和技術(shù)管理。但今天我們要討論的不是數(shù)據(jù)治理,而是企業(yè)數(shù)據(jù)治理的基礎(chǔ)——元數(shù)據(jù)管理。

接觸過數(shù)據(jù)分析的小伙伴應(yīng)該清楚數(shù)據(jù)治理在挖掘數(shù)據(jù)價(jià)值、促進(jìn)企業(yè)業(yè)務(wù)發(fā)展等方面的重要意義。數(shù)據(jù)治理是由企業(yè)數(shù)據(jù)治理部門發(fā)起實(shí)施的一系列政策和流程,關(guān)于如何制定和實(shí)施整個(gè)企業(yè)內(nèi)部數(shù)據(jù)的業(yè)務(wù)應(yīng)用和技術(shù)管理。但今天我們要討論的不是數(shù)據(jù)治理,而是企業(yè)數(shù)據(jù)治理的基礎(chǔ)——元數(shù)據(jù)管理。

一、元數(shù)據(jù)定義

元數(shù)據(jù)是關(guān)于數(shù)據(jù)的數(shù)據(jù),打通了源數(shù)據(jù)、數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)應(yīng)用。記錄了數(shù)據(jù)從產(chǎn)生到消費(fèi)的全過程,包括數(shù)據(jù)倉(cāng)庫(kù)中模型的定義,各層級(jí)間的映射關(guān)系、監(jiān)控?cái)?shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)狀態(tài)以及ETL作業(yè)的任務(wù)狀態(tài)。元數(shù)據(jù)可以幫助數(shù)據(jù)倉(cāng)庫(kù)管理員和開發(fā)人員非常方便的找到他們所關(guān)系的數(shù)據(jù),用于指導(dǎo)其進(jìn)行數(shù)據(jù)管理和開發(fā)工作。

 二、元數(shù)據(jù)分類

元數(shù)據(jù)可以分為業(yè)務(wù)元數(shù)據(jù)和技術(shù)元數(shù)據(jù)。
1、業(yè)務(wù)元數(shù)據(jù)
業(yè)務(wù)元數(shù)據(jù)是介于使用者和實(shí)際系統(tǒng)之間的語(yǔ)義層,使得不懂計(jì)算機(jī)技術(shù)的業(yè)務(wù)人員也能夠“讀懂”數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)。
1)數(shù)據(jù)應(yīng)用元數(shù)據(jù),如數(shù)據(jù)報(bào)表、數(shù)據(jù)產(chǎn)品等配置和運(yùn)行元數(shù)據(jù);
2)OneData元數(shù)據(jù),如維度及屬性、業(yè)務(wù)過程、指標(biāo)等規(guī)范化定義,用于更好的管理和使用數(shù)據(jù)。
2、技術(shù)元數(shù)據(jù)
技術(shù)元數(shù)據(jù)存放關(guān)于數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)技術(shù)細(xì)節(jié)的數(shù)據(jù),用于開發(fā)和管理數(shù)據(jù)倉(cāng)庫(kù)使用的數(shù)據(jù)。
1)分布式計(jì)算系統(tǒng)元數(shù)據(jù),包含作業(yè)信息、作業(yè)類型、實(shí)例名稱、輸入輸出、SQL、運(yùn)行參數(shù)、執(zhí)行時(shí)間、最細(xì)粒度的執(zhí)行信息等;
2)分布式存儲(chǔ)系統(tǒng)元數(shù)據(jù),包含表、列、分區(qū)等信息。記錄了表名、分區(qū)信息、責(zé)任人信息、文件大小、表類型、生命周期,以及字段名、字段類型、備注、是否分區(qū)字段等信息;
3)數(shù)據(jù)質(zhì)量和運(yùn)維相關(guān)元數(shù)據(jù),如任務(wù)監(jiān)控、運(yùn)維報(bào)警、數(shù)據(jù)質(zhì)量、故障等信息,包含任務(wù)監(jiān)控運(yùn)行日志、告警配置及運(yùn)行日志、故障信息等;
4)數(shù)據(jù)開發(fā)平臺(tái)中的數(shù)據(jù)同步、計(jì)算任務(wù)、任務(wù)調(diào)度等信息,包含數(shù)據(jù)同步的輸入輸出表和字段,以及同步任務(wù)本身的節(jié)點(diǎn)信息。

 三、元數(shù)據(jù)管理對(duì)企業(yè)的價(jià)值

元數(shù)據(jù)是數(shù)據(jù)倉(cāng)庫(kù)管理系統(tǒng)的重要組成部分。元數(shù)據(jù)管理是企業(yè)級(jí)數(shù)據(jù)倉(cāng)庫(kù)的關(guān)鍵組成部分,貫穿數(shù)據(jù)倉(cāng)庫(kù)的整個(gè)生命周期,利用元數(shù)據(jù)驅(qū)動(dòng)數(shù)據(jù)倉(cāng)庫(kù)的開發(fā),使數(shù)據(jù)倉(cāng)庫(kù)自動(dòng)化、可視化。通過元數(shù)據(jù)管理,可以縮短數(shù)據(jù)清理周期,提高數(shù)據(jù)質(zhì)量,系統(tǒng)管理數(shù)據(jù)中心項(xiàng)目中各業(yè)務(wù)系統(tǒng)的海量數(shù)據(jù),梳理業(yè)務(wù)元數(shù)據(jù)之間的關(guān)系,建立信息數(shù)據(jù)標(biāo)準(zhǔn),完善對(duì)這些數(shù)據(jù)的解釋和定義,在企業(yè)范圍內(nèi)形成一致統(tǒng)一的數(shù)據(jù)定義,跟蹤分析這些數(shù)據(jù)來源、運(yùn)行和變化。

 四、元數(shù)據(jù)管理范圍及方法

元數(shù)據(jù)管理的范圍大致如下四個(gè)方面:
1、元數(shù)據(jù)源:元數(shù)據(jù)源數(shù)據(jù)倉(cāng)庫(kù)和數(shù)據(jù)平臺(tái)中的數(shù)據(jù)實(shí)體定義和結(jié)構(gòu)信息;
2、數(shù)據(jù)接口:生產(chǎn)系統(tǒng)和操作型系統(tǒng)中采集到數(shù)據(jù)倉(cāng)庫(kù)或者數(shù)據(jù)平臺(tái)中的各中數(shù)據(jù)接口信息;
3、報(bào)表展現(xiàn)(BI):報(bào)表展現(xiàn)的相關(guān)指標(biāo)和統(tǒng)計(jì)口徑;
4、數(shù)據(jù)集成(ETL):數(shù)據(jù)匯總、處理和分析的數(shù)據(jù)集成相關(guān)信息。
五、元數(shù)據(jù)管理工具
元數(shù)據(jù)管理有利于統(tǒng)一數(shù)據(jù)口徑,標(biāo)記數(shù)據(jù)方向,分析數(shù)據(jù)關(guān)系,為企業(yè)級(jí)數(shù)據(jù)治理提供支持。是企業(yè)實(shí)現(xiàn)數(shù)據(jù)自我服務(wù)、促進(jìn)數(shù)據(jù)運(yùn)營(yíng)的可行路線。想要實(shí)現(xiàn)有效的元數(shù)據(jù)管理可以借助元數(shù)據(jù)管理工具,億信睿治元數(shù)據(jù)管理平臺(tái)就非常優(yōu)秀。
睿治元數(shù)據(jù)管理平臺(tái)可以進(jìn)行影響分析和血緣分析。例如,通過影響分析,可以識(shí)別當(dāng)源數(shù)據(jù)項(xiàng)發(fā)生變化時(shí),哪些KPI和報(bào)告會(huì)受到影響;通過血緣分析,可以從某一實(shí)體出發(fā),往回追溯其處理過程,直到數(shù)據(jù)源接口,可快速追溯數(shù)據(jù)來源和加工過程,從而實(shí)現(xiàn)應(yīng)用系統(tǒng)的維護(hù)和運(yùn)行。
通過以上分析,相信大家對(duì)元數(shù)據(jù)管理、元數(shù)據(jù)與數(shù)據(jù)管理的關(guān)系有了一定的了解。元數(shù)據(jù)管理是企業(yè)數(shù)據(jù)治理的基礎(chǔ),其重要性不容忽視。企業(yè)要實(shí)現(xiàn)有效的數(shù)據(jù)管理,可以適當(dāng)使用元數(shù)據(jù)管理工具。一個(gè)優(yōu)秀的元數(shù)據(jù)管理工具對(duì)企業(yè)的業(yè)務(wù)運(yùn)營(yíng)具有重要意義。

認(rèn)為本內(nèi)容有幫助
0
您可能需要的數(shù)據(jù)產(chǎn)品
億信華辰助力政企數(shù)字化轉(zhuǎn)型
customer

在線咨詢

在線咨詢

點(diǎn)擊進(jìn)入在線咨詢