可免費試用30天
已有30000+人申請
文|億信華辰大數(shù)據(jù)知識庫2021-09-04
隨著大數(shù)據(jù)時代的到來,公司業(yè)務(wù)數(shù)據(jù)應(yīng)用場景越來越多,而數(shù)據(jù)量也會隨著業(yè)務(wù)快速增長。海量的數(shù)據(jù)可能會導(dǎo)致數(shù)據(jù)標(biāo)準(zhǔn)不一致,數(shù)據(jù)權(quán)限不分明,數(shù)據(jù)冗余,缺乏元數(shù)據(jù)管理機制,血緣關(guān)系查詢非常困難、低效等問題。這個時候就需要對數(shù)據(jù)進(jìn)行治理。
數(shù)據(jù)治理是指關(guān)于企業(yè)內(nèi)部數(shù)據(jù)正式管理的過程和實踐,包括數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量和相關(guān)的流程與標(biāo)準(zhǔn),確保企業(yè)數(shù)據(jù)的安全和正確使用。
數(shù)據(jù)治理的目的是:保證數(shù)據(jù)的可用性、數(shù)據(jù)質(zhì)量和數(shù)據(jù)安全。
1、降低數(shù)據(jù)使用成本,提升數(shù)據(jù)使用效率。
2、將數(shù)據(jù)規(guī)范化、標(biāo)準(zhǔn)化,保障數(shù)據(jù)建模統(tǒng)一性,統(tǒng)一標(biāo)準(zhǔn),數(shù)據(jù)一致性 。
3、建立數(shù)據(jù)管理方案,提升解決問題效率。
4、提升數(shù)據(jù)質(zhì)量,幫助企業(yè)用戶進(jìn)行高效數(shù)據(jù)驅(qū)動決策分析。
5、建立數(shù)據(jù)所有權(quán)和相關(guān)職責(zé)來提高數(shù)據(jù)安全性
6、幫助企業(yè)進(jìn)行數(shù)據(jù)戰(zhàn)略規(guī)劃和部署,提高經(jīng)營效率。
想從根本上改善數(shù)據(jù)的問題,還是需要做好數(shù)據(jù)治理的規(guī)范工作。簡單來講,數(shù)據(jù)治理就是要約束輸入,規(guī)范輸出。
約束輸入:在用戶輸入的文本框中,省會、城市這些固定值,使用下拉列表,避免用戶手動輸入。對輸入內(nèi)容設(shè)置格式校驗,比如手機號、郵箱等。將信息進(jìn)行分段處理,避免事后拆分。
規(guī)范輸出:統(tǒng)一語義,針對公司數(shù)據(jù)做一個語義字典。所有報告上的指標(biāo)名稱,都要在語義字典中備注,語義字典明確定義其標(biāo)準(zhǔn)和含義。不同指標(biāo)必須用不同的名詞。如果發(fā)現(xiàn)一個詞已經(jīng)在語義字典中有了,就必須走流程申請注冊一個新詞到語義字典。
1、建設(shè)數(shù)據(jù)標(biāo)準(zhǔn)體系,包括數(shù)據(jù)標(biāo)準(zhǔn)、管理標(biāo)準(zhǔn)、質(zhì)量標(biāo)準(zhǔn)等內(nèi)容,保證各業(yè)務(wù)部門、各業(yè)務(wù)系統(tǒng)能得到落實與管控。包括元數(shù)據(jù)管理功能是否得到詳細(xì)認(rèn)真的設(shè)計、應(yīng)用,助力于業(yè)務(wù)系統(tǒng)。例如,某銀行數(shù)據(jù)標(biāo)準(zhǔn)體系建設(shè)中,元數(shù)據(jù)中除了應(yīng)設(shè)有國標(biāo)、行業(yè)標(biāo)體系(如地理、行政區(qū)劃,業(yè)務(wù)門類、分行等)的數(shù)據(jù)之外,還應(yīng)涉及應(yīng)用系列行標(biāo)數(shù)據(jù),如建筑物、樓宇體系等。
2、完成各業(yè)務(wù)系統(tǒng)的整合工作。完成用戶集成、數(shù)據(jù)集成、業(yè)務(wù)集成工作,消除信息孤島,完善數(shù)據(jù)中心建設(shè)。首先,盡可能在被集成的業(yè)務(wù)系統(tǒng),即產(chǎn)生數(shù)據(jù)的源系統(tǒng)中解決數(shù)據(jù)質(zhì)量問題,這對于整個體系的數(shù)據(jù)治理來說是非常高效的措施。其次,在各業(yè)務(wù)系統(tǒng)及平臺的建設(shè)過程中,描述核心業(yè)務(wù)實體的數(shù)據(jù),如部門、人員、入賬出賬、資產(chǎn)、財務(wù)等,交換、共享性要求較高,均要被納入到主數(shù)據(jù)范圍,形成一致的、完整的、準(zhǔn)確的核心業(yè)務(wù)數(shù)據(jù),由數(shù)據(jù)中心統(tǒng)一對外提供數(shù)據(jù)服務(wù)。最后,落實到數(shù)據(jù)治理平臺上,集中反映在主數(shù)據(jù)管理是否完備,是否能以多種數(shù)據(jù)共享形式服務(wù)于各類應(yīng)用。
3、評估數(shù)據(jù)質(zhì)量,生成數(shù)據(jù)質(zhì)量報告。以數(shù)據(jù)標(biāo)準(zhǔn)體系為基準(zhǔn),以數(shù)據(jù)治理平臺為工具,數(shù)據(jù)管理員對數(shù)據(jù)質(zhì)量進(jìn)行檢測,根據(jù)實際需求,利用檢測數(shù)據(jù)進(jìn)行單一主題或者整體進(jìn)行數(shù)據(jù)質(zhì)量分析,生成數(shù)據(jù)質(zhì)量報告。在數(shù)據(jù)質(zhì)量報告的基礎(chǔ)上,結(jié)合系統(tǒng)配置好的數(shù)據(jù)管控體系,生成針對部門、業(yè)務(wù)數(shù)據(jù)管理員的各子數(shù)據(jù)集整改報告。
4、明確管控對象。實現(xiàn)以用戶為中心,以元數(shù)據(jù)為基礎(chǔ),貫穿信息標(biāo)準(zhǔn)、數(shù)據(jù)采集、數(shù)據(jù)標(biāo)準(zhǔn)化、數(shù)據(jù)質(zhì)量、主數(shù)據(jù)管理、數(shù)據(jù)共享等從源端到數(shù)據(jù)中心,再到應(yīng)用端的全過程管理。數(shù)據(jù)在信息系統(tǒng)中是以不同形態(tài)體現(xiàn)的,需要將每種形態(tài)管理好,才有可能管好最終的數(shù)據(jù)質(zhì)量。信息系統(tǒng)建設(shè)過程中,數(shù)據(jù)質(zhì)量不佳主要原因之一是忽視了對數(shù)據(jù)的管控,這就會造成數(shù)據(jù)的設(shè)計與需求不一致,開發(fā)與設(shè)計不一致,對數(shù)據(jù)質(zhì)量要求考慮缺失,不同系統(tǒng)對數(shù)據(jù)的定義和技術(shù)實現(xiàn)不一致等等諸多問題。
5、適合技術(shù)工具。工具核心作用在于知識的固化和提高數(shù)據(jù)治理人員的工作效率。比如:需要手工編寫程序收集的元數(shù)據(jù),工具幫你自動獲取;需要人工識別或編寫代碼實現(xiàn)的數(shù)據(jù)質(zhì)量檢查,工具幫你自動識別問題;用文檔管理的數(shù)據(jù)字典,工具幫你在線管理;基于郵件和線下的流程,工具幫你線上自動化。
以上介紹的數(shù)據(jù)治理方法中,大多都需要根據(jù)企業(yè)自身的信息建設(shè)化程度來做出相應(yīng)調(diào)整。但對于選擇什么樣的工具,目前,國內(nèi)主流的數(shù)據(jù)治理工具就是億信華辰旗下的睿治智能數(shù)據(jù)治理平臺。
億信華辰深耕商務(wù)智能和大數(shù)據(jù)領(lǐng)域15年,著眼于打造數(shù)據(jù)全生命周期的智能化產(chǎn)品線,致力于幫助企業(yè)和政府解決數(shù)據(jù)應(yīng)用難題,實現(xiàn)企業(yè)生產(chǎn)力和政府治理能力的數(shù)字化轉(zhuǎn)型,讓數(shù)據(jù)驅(qū)動進(jìn)步。睿治數(shù)據(jù)治理平臺是由實時大數(shù)據(jù)管理、元數(shù)據(jù)管理、數(shù)據(jù)標(biāo)準(zhǔn)管理、數(shù)據(jù)質(zhì)量管理、主數(shù)據(jù)管理、數(shù)據(jù)安全管理多產(chǎn)品組成的一整套解決方案,是一款智能、敏捷的數(shù)據(jù)全生命周期的管理應(yīng)用平臺,為企業(yè)保證了業(yè)務(wù)數(shù)據(jù)在采集、集中、轉(zhuǎn)換、存儲、應(yīng)用整個過程中的完整性、準(zhǔn)確性、一致性和時效性。
在線咨詢
點擊進(jìn)入在線咨詢