數(shù)據(jù)問題的來源可能產(chǎn)生于從數(shù)據(jù)源頭到數(shù)據(jù)存儲介質(zhì)的各個環(huán)節(jié)。在數(shù)據(jù)采集階段，數(shù)據(jù)的真實性、準(zhǔn)確性、完整性、時效性都會影響數(shù)據(jù)質(zhì)量。除此之外，數(shù)據(jù)的加工、存儲過程都有可能涉及對原始數(shù)據(jù)的修改，從而引發(fā)數(shù)據(jù)的質(zhì)量問題。所以，技術(shù)、流程、管理等多方面的因素都有可能會影響到數(shù)據(jù)質(zhì)量。

數(shù)據(jù)問題的來源可能產(chǎn)生于從數(shù)據(jù)源頭到數(shù)據(jù)存儲介質(zhì)的各個環(huán)節(jié)。在數(shù)據(jù)采集階段，數(shù)據(jù)的真實性、準(zhǔn)確性、完整性、時效性都會影響數(shù)據(jù)質(zhì)量。除此之外，數(shù)據(jù)的加工、存儲過程都有可能涉及對原始數(shù)據(jù)的修改，從而引發(fā)數(shù)據(jù)的質(zhì)量問題。所以，技術(shù)、流程、管理等多方面的因素都有可能會影響到數(shù)據(jù)質(zhì)量。
一、數(shù)據(jù)質(zhì)量與數(shù)據(jù)質(zhì)量管理
1、數(shù)據(jù)質(zhì)量
數(shù)據(jù)質(zhì)量在業(yè)務(wù)環(huán)境下，數(shù)據(jù)符合數(shù)據(jù)消費者的使用目的，數(shù)據(jù)質(zhì)量需要滿足業(yè)務(wù)場景具體的需求。數(shù)據(jù)質(zhì)量包含兩個方面：數(shù)據(jù)自身的質(zhì)量和數(shù)據(jù)的過程質(zhì)量。
數(shù)據(jù)自身的質(zhì)量很好理解，比如數(shù)據(jù)必須真實準(zhǔn)確地反映實際發(fā)生的業(yè)務(wù)，任何業(yè)務(wù)操作的數(shù)據(jù)都沒有被遺漏，數(shù)據(jù)存在各種約束條件，這種約束條件不能自相矛盾等等。
數(shù)據(jù)的過程質(zhì)量就是數(shù)據(jù)的使用過程符合標(biāo)準(zhǔn)規(guī)范，比如數(shù)據(jù)存儲：數(shù)據(jù)是否被安全的存儲到了合適的介質(zhì)上，能夠保證數(shù)據(jù)不受外來因素的破壞。當(dāng)然數(shù)據(jù)存儲只是數(shù)據(jù)使用過程的一個環(huán)節(jié)，除此之外還包括獲取、傳輸、應(yīng)用和刪除等一系列的使用過程，這其實也是數(shù)據(jù)生命周期的各個階段。
2、數(shù)據(jù)質(zhì)量管理
數(shù)據(jù)質(zhì)量管理指對數(shù)據(jù)在每個階段里可能引發(fā)的各類數(shù)據(jù)質(zhì)量問題進行識別、度量、監(jiān)控、預(yù)警等一系列管理活動，并通過改善和提高組織的管理水平確保數(shù)據(jù)質(zhì)量的提升。
換句話說，數(shù)據(jù)質(zhì)量管理是一個集方法論、管理、技術(shù)和業(yè)務(wù)為一體的解決方案，不是一時的數(shù)據(jù)治理方法，是一個不斷循環(huán)的管理過程。一方面反映出企業(yè)數(shù)據(jù)很難一次性就達到使用的標(biāo)準(zhǔn)規(guī)范，畢竟數(shù)據(jù)治理是一個相對漫長的過程；另一方面也反映出數(shù)據(jù)質(zhì)量的重要性以及數(shù)據(jù)質(zhì)量工作的零散性和瑣碎性。
二、企業(yè)數(shù)據(jù)質(zhì)量問題
1、數(shù)據(jù)準(zhǔn)確性：準(zhǔn)確性也叫可靠性，是用于分析和識別哪些是不準(zhǔn)確的或無效的數(shù)據(jù)，不可靠的數(shù)據(jù)可能會導(dǎo)致嚴(yán)重的問題，會造成有缺陷的方法和糟糕的決策。
2、數(shù)據(jù)真實性：數(shù)據(jù)必須真實準(zhǔn)確的反映客觀的實體存在或真實的業(yè)務(wù)，真實可靠的原始統(tǒng)計數(shù)據(jù)是企業(yè)統(tǒng)計工作的靈魂，是一切管理工作的基礎(chǔ)，是經(jīng)營者進行正確經(jīng)營決策必不可少的第一手資料。
3、數(shù)據(jù)完整性：數(shù)據(jù)完整性問題包括：模型設(shè)計不完整，例如：唯一性約束不完整、參照不完整;數(shù)據(jù)條目不完整，例如：數(shù)據(jù)記錄丟失或不可用;數(shù)據(jù)屬性不完整，例如：數(shù)據(jù)屬性空值。不完整的數(shù)據(jù)所能借鑒的價值就會大大降低，也是數(shù)據(jù)質(zhì)量問題最為基礎(chǔ)和常見的一類問題。
4、數(shù)據(jù)唯一性：用于識別和度量重復(fù)數(shù)據(jù)、冗余數(shù)據(jù)。重復(fù)數(shù)據(jù)是導(dǎo)致業(yè)務(wù)無法協(xié)同、流程無法追溯的重要因素，也是數(shù)據(jù)治理需要解決的最基本的數(shù)據(jù)問題。
5、數(shù)據(jù)關(guān)聯(lián)性：數(shù)據(jù)關(guān)聯(lián)性問題是指存在數(shù)據(jù)關(guān)聯(lián)的數(shù)據(jù)關(guān)系缺失或錯誤，例如：函數(shù)關(guān)系、相關(guān)系數(shù)、主外鍵關(guān)系、索引關(guān)系等。存在數(shù)據(jù)關(guān)聯(lián)性問題，會直接影響數(shù)據(jù)分析的結(jié)果，進而影響管理決策。
6、數(shù)據(jù)及時性：數(shù)據(jù)的及時性(In-time)是指能否在需要的時候獲到數(shù)據(jù)，數(shù)據(jù)的及時性與企業(yè)的數(shù)據(jù)處理速度及效率有直接的關(guān)系，是影響業(yè)務(wù)處理和管理效率的關(guān)鍵指標(biāo)。
7、數(shù)據(jù)一致性：多源數(shù)據(jù)的數(shù)據(jù)模型不一致，例如：命名不一致、數(shù)據(jù)結(jié)構(gòu)不一致、約束規(guī)則不一致。數(shù)據(jù)實體不一致，例如：數(shù)據(jù)編碼不一致、命名及含義不一致、分類層次不一致、生命周期不一致……。相同的數(shù)據(jù)有多個副本的情況下的數(shù)據(jù)不一致、數(shù)據(jù)內(nèi)容沖突的問題。
三、數(shù)據(jù)質(zhì)量管理方法
1、建立質(zhì)量管控流程和規(guī)范
明確質(zhì)量管控的角色、職責(zé)，建立可執(zhí)行的工作流程、可量化的工作評估等關(guān)于數(shù)據(jù)質(zhì)量管控辦法，同時也應(yīng)具備績效考核、沖突解決與管控方式等。
2、執(zhí)行管理工作
進行已知數(shù)據(jù)問題的評估，評估的范圍控制在本輪管控的目標(biāo)范圍內(nèi)。通過對數(shù)據(jù)進行剖析，發(fā)現(xiàn)數(shù)據(jù)問題，具體規(guī)則又可通過標(biāo)準(zhǔn)或業(yè)務(wù)調(diào)研進行提取。獲得已知數(shù)據(jù)問題后，就應(yīng)設(shè)計數(shù)據(jù)質(zhì)量控制操作程序。主要包括制定質(zhì)量問題評估方式和整改方式、制定質(zhì)量報告內(nèi)容及對象以及制定檢查和監(jiān)控的頻率及方式。根據(jù)剖析的質(zhì)檢規(guī)則和控制操作程序，對數(shù)據(jù)質(zhì)量需求進行定義。數(shù)據(jù)質(zhì)量需求定義完畢之后，我們就需要確定在此需求下，目前數(shù)據(jù)質(zhì)量的水平處于什么位置。明確反應(yīng)質(zhì)量水平的并最直觀的就是錯誤數(shù)據(jù)的詳情情況。問題找到后，針對根據(jù)不同的質(zhì)量問題，進行不同的質(zhì)量整改方案。比如：源頭修改、補錄、技術(shù)修復(fù)以及遺留問題管控等。
3、檢查數(shù)據(jù)質(zhì)量
首先確定整改質(zhì)量，對處理后的數(shù)據(jù)進行再次質(zhì)檢，出具數(shù)據(jù)質(zhì)量的報告;然后，對比處理前后效果，總結(jié)改進措施;最后，檢查數(shù)據(jù)質(zhì)量是否合格，分析不合格原因并下一輪管控中進行技術(shù)上或者操作程序上的改進。
4、監(jiān)控數(shù)據(jù)質(zhì)量，控制管理程序和績效
根據(jù)既定的操作程序，對質(zhì)量管控過程中各個環(huán)節(jié)參與者進行績效評估。還可以根據(jù)不同時期的重點制定不同的評分標(biāo)準(zhǔn)，有針對性的進行評價和管控，如整改初期數(shù)據(jù)缺失嚴(yán)重，則可對完整性規(guī)則權(quán)重調(diào)大，以期更快看到成效或者達到更好的效果。

四、主流數(shù)據(jù)質(zhì)量管理工具
正所謂，工欲善其事，必先利其器。億信華辰睿治數(shù)據(jù)治理平臺的數(shù)據(jù)質(zhì)量管理模塊以全面質(zhì)量管理PDCA循環(huán)管理方法為指導(dǎo)，充分結(jié)合國內(nèi)數(shù)據(jù)質(zhì)量管理工作的特點，運用元數(shù)據(jù)管理、數(shù)據(jù)挖掘、數(shù)據(jù)分析、工作流、評分卡、可視化等技術(shù)最終幫助企業(yè)和政府建立數(shù)據(jù)質(zhì)量管理體系，全面提升數(shù)據(jù)的完整性、規(guī)范性、及時性、一致性、邏輯性等，降低數(shù)據(jù)管理成本，減少因數(shù)據(jù)不可靠導(dǎo)致的決策偏差和損失。