當(dāng)我在1983年開始擔(dān)任數(shù)據(jù)庫管理員時(shí)，一切都與技術(shù)的集中化有關(guān)。數(shù)據(jù)安全地存儲(chǔ)在企業(yè)大型機(jī)上，只有具備導(dǎo)航預(yù)處理數(shù)據(jù)庫技能的程序員才能訪問它。差不多四十年后，所有這些都與數(shù)據(jù)民主化和強(qiáng)大的數(shù)據(jù)治理戰(zhàn)略的需求有關(guān)。在當(dāng)天，業(yè)務(wù)分析師必須與IT部門聯(lián)手，因?yàn)樗麄儾恢廊绾螌?dǎo)航信息管理系統(tǒng)數(shù)據(jù)庫，即使他們可以也不會(huì)被授予訪問權(quán)限。IT部門打印出月度報(bào)告并分發(fā)它們，就像摩西從石頭上下山一樣。
隨著個(gè)人計(jì)算機(jī)的出現(xiàn)，權(quán)力的平衡從根本上發(fā)生了變化。突然之間，商人可以訪問電子表格，并可以創(chuàng)建自己的計(jì)算和分析，即使數(shù)據(jù)仍然大部分無法觸及。然后是客戶端/服務(wù)器計(jì)算和急于分散數(shù)據(jù)，帶來了新的可能性，但也因?yàn)椴煌块T使用不同版本的數(shù)據(jù)而產(chǎn)生混淆。分析師爭論誰的版本是正確的。分析現(xiàn)在可以由業(yè)務(wù)分析師完成，但未就數(shù)據(jù)源的合法性達(dá)成一致，隨之而來的是混亂。
數(shù)據(jù)治理的曙光IT部門使用數(shù)據(jù)倉庫進(jìn)行響應(yīng)，數(shù)據(jù)倉庫會(huì)在斷開連接的交易系統(tǒng)中收集數(shù)據(jù)，僅用于分析。出現(xiàn)了聰明的報(bào)告工具，可以更容易地操作，加入和匯總原始交易表，甚至可以將它們下載到電子表格中。當(dāng)然，原始數(shù)據(jù)仍然存儲(chǔ)在不同的應(yīng)用程序和格式中，但只要付出足夠的努力，就可以誘使數(shù)據(jù)倉庫理解所有這些，提供客戶，產(chǎn)品，資產(chǎn)和位置等維度。但是，要實(shí)際生成一致的客戶和產(chǎn)品列表，必須解決底層系統(tǒng)的不一致問題。
主數(shù)據(jù)管理（MDM）誕生了，與此同時(shí)，還需要數(shù)據(jù)治理策略。鼓勵(lì)或哄騙業(yè)務(wù)用戶決定哪些客戶和產(chǎn)品的分類是“黃金記錄”，要在整個(gè)企業(yè)中高舉，哪些將被投入到部門特定的本地術(shù)語的荒野中。這是一個(gè)經(jīng)常激烈的過程，不同的部門爭論哪個(gè)是分類數(shù)據(jù)的最佳方式。一些公司文化比其他文化更適合這種方法。高度集中的公司習(xí)慣于從高度但分散的方式?jīng)Q定結(jié)構(gòu)，并且努力保持在數(shù)據(jù)治理結(jié)構(gòu)中。這些公司的分析師認(rèn)為自己是自由戰(zhàn)士，而中央辦公室的分析人員則認(rèn)為他們是數(shù)據(jù)恐怖分子。
很明顯，至少在很多公司中，自由戰(zhàn)士現(xiàn)在方興未艾。這標(biāo)志著數(shù)據(jù)準(zhǔn)備工具的市場不斷增長。這些產(chǎn)品能夠訪問來自各種來源的數(shù)據(jù)，包括傳統(tǒng)數(shù)據(jù)庫，應(yīng)用程序包，Excel或企業(yè)防火墻外的應(yīng)用程序。它們支持一些數(shù)據(jù)質(zhì)量技術(shù)，例如分析，并使業(yè)務(wù)用戶能夠設(shè)置數(shù)據(jù)轉(zhuǎn)換，并通過可重復(fù)的工作流程自動(dòng)執(zhí)行此類提取，數(shù)據(jù)清理和轉(zhuǎn)換。這些工具擁有自己的分析工具，或者可以調(diào)用最新的可視化和數(shù)據(jù)挖掘產(chǎn)品，使分析師能夠根據(jù)自己的內(nèi)容處理數(shù)據(jù)。
如果企業(yè)數(shù)據(jù)倉庫和MDM正在開展工作，那么這樣的市場就不會(huì)存在。數(shù)據(jù)準(zhǔn)備，質(zhì)量檢查和轉(zhuǎn)換正是準(zhǔn)備將數(shù)據(jù)輸入數(shù)據(jù)倉庫的準(zhǔn)備。麻煩的是公司數(shù)據(jù)倉庫已超出其自然限制。數(shù)據(jù)現(xiàn)在來自各種各樣的來源 - 其中許多來自企業(yè)之外 - 并且在這樣的數(shù)量中，傳統(tǒng)的數(shù)據(jù)管理方法正在崩潰。
電子商務(wù)系統(tǒng)可以生成如此大小的網(wǎng)絡(luò)流量日志，使得普通數(shù)據(jù)庫不能處理該處理。車輛和機(jī)械上的傳感器現(xiàn)在產(chǎn)生大量的流數(shù)據(jù)：波音787每次飛行產(chǎn)生幾乎1TB的數(shù)據(jù)。在其他行業(yè)中也是如此，汽車，家庭智能電表甚至道路上的傳感器都會(huì)產(chǎn)生大量數(shù)據(jù)進(jìn)行分析。所有這些都是傳統(tǒng)企業(yè)數(shù)據(jù)以及來自業(yè)務(wù)合作伙伴和數(shù)據(jù)經(jīng)紀(jì)人的數(shù)據(jù)的補(bǔ)充。有了這么多數(shù)據(jù)，誰有時(shí)間參加會(huì)議討論不同客戶分類層次結(jié)構(gòu)的優(yōu)點(diǎn)？
掌握數(shù)據(jù)管理
公司需要以某種方式收回對這種快速流動(dòng)的數(shù)據(jù)流的控制，如果他們要理解它的話。如果沒有辦法深入了解并深入了解數(shù)據(jù)湖泊，數(shù)據(jù)湖泊將成為數(shù)據(jù)沼澤。數(shù)據(jù)治理策略可能不是一個(gè)性感的主題，但它是需要發(fā)生的事情的核心。那些使用新工具構(gòu)建自己的提取和轉(zhuǎn)換的分析師需要幫助決定如何管理數(shù)據(jù)，因?yàn)槿绻悴荒芫偷讓訑?shù)據(jù)是否值得信任達(dá)成一致，所有漂亮的圖表和AI工具都沒有任何意義。
在沒有某種結(jié)構(gòu)的情況下，我們將回到過去，分析師互相交換圖表并爭論誰的數(shù)據(jù)是正確的。將數(shù)據(jù)精靈放回瓶子中將是困難的并且需要紀(jì)律，但是在所有太多的組織中，事情現(xiàn)在感覺混亂而不是管理。它不是要從高層實(shí)施規(guī)則，而是要在整個(gè)組織層面嵌入分析和數(shù)據(jù)管理規(guī)程。否則，有價(jià)值的商業(yè)見解可能會(huì)被忽視，競爭優(yōu)勢也會(huì)喪失。
一個(gè)2018麥肯錫的報(bào)告忽視高績效的公司也比兩倍，可能有一個(gè)強(qiáng)大的數(shù)據(jù)治理策略和可能有一個(gè)清晰和易于理解的數(shù)據(jù)整體戰(zhàn)略的兩倍多。同一份報(bào)告認(rèn)為，表現(xiàn)優(yōu)異的人與包裝之間的差距正在迅速擴(kuò)大。如果您要利用分析并獲得業(yè)務(wù)優(yōu)勢，時(shí)間至關(guān)重要。
（部分內(nèi)容來源網(wǎng)絡(luò)，如有侵權(quán)請聯(lián)系刪除）
