“數(shù)據(jù)架構(gòu)是業(yè)務(wù)戰(zhàn)略的物理實(shí)現(xiàn)，”?全球數(shù)據(jù)戰(zhàn)略有限公司?EMEA首席顧問(wèn)Nigel Turner在DATAVERSITY??企業(yè)數(shù)據(jù)治理在線會(huì)議上發(fā)言。“這是整個(gè)連續(xù)體的一個(gè)關(guān)鍵部分，您需要在組織內(nèi)部有效地管理數(shù)據(jù)，”數(shù)據(jù)治理構(gòu)成了這些戰(zhàn)略與業(yè)務(wù)實(shí)際實(shí)施之間的重要橋梁。

數(shù)據(jù)架構(gòu)：它是什么？

該DAMA DMBOK2說(shuō)，數(shù)據(jù)架構(gòu)“定義的藍(lán)圖與組織策略相吻合建立戰(zhàn)略數(shù)據(jù)要求和設(shè)計(jì)，以滿(mǎn)足這些要求的管理數(shù)據(jù)資產(chǎn)。”特納指出，這個(gè)定義的三個(gè)關(guān)鍵部分，第一個(gè)是單詞“藍(lán)圖“這意味著任何沒(méi)有實(shí)施計(jì)劃的數(shù)據(jù)架構(gòu)都可能會(huì)保留在架子上，直到永恒的迷霧上升為止?！?/span>

第二個(gè)關(guān)鍵部分是“與組織戰(zhàn)略保持一致?！?他說(shuō)，數(shù)據(jù)架構(gòu)必須直接與業(yè)務(wù)目標(biāo)以及數(shù)據(jù)如何支持這些目標(biāo)相關(guān)聯(lián)。第三部分是關(guān)于建立戰(zhàn)略數(shù)據(jù)要求。因?yàn)椤叭魏斡行У臄?shù)據(jù)架構(gòu)都必須具有前瞻性?！?/span>

他引用了Donna Burbank和Charles Roe?撰寫(xiě)的題為“?數(shù)據(jù)架構(gòu)趨勢(shì)”的DATAVERSITY研究報(bào)告，指出了對(duì)該問(wèn)題的一系列回答：“什么是數(shù)據(jù)架構(gòu)？”

“我們?cè)跀?shù)據(jù)管理中遇到的一個(gè)問(wèn)題是，如果您采用任何數(shù)據(jù)管理概念或術(shù)語(yǔ)或規(guī)則，不同的人會(huì)以不同的方式對(duì)其進(jìn)行定義?！?/span>

無(wú)論如何定義，數(shù)據(jù)架構(gòu)都必須具有一些具體的可交付成果，例如規(guī)范，不同抽象級(jí)別的主設(shè)計(jì)文檔，以及數(shù)據(jù)通過(guò)系統(tǒng)的所有容器和路徑的描述。如果沒(méi)有這些可交付成果，他說(shuō)，“那么顯然，你實(shí)際上并沒(méi)有為企業(yè)提供任何有價(jià)值的東西。”

數(shù)據(jù)架構(gòu)的典型可交付成果

標(biāo)準(zhǔn)可交付成果包括：?

• 有關(guān)數(shù)據(jù)使用，指導(dǎo)原則，使用意圖聲明和問(wèn)責(zé)機(jī)制的政策
• 數(shù)據(jù)模型包括企業(yè)概念模型，邏輯數(shù)據(jù)模型，物理數(shù)據(jù)模型和特定于應(yīng)用程序的邏輯數(shù)據(jù)模型
• 數(shù)據(jù)目錄
• 數(shù)據(jù)來(lái)源清單
• 主數(shù)據(jù)或參考數(shù)據(jù)，以及廣泛共享的數(shù)據(jù)
• 定義關(guān)鍵數(shù)據(jù)，包括詞匯表，詞典，定義和應(yīng)用標(biāo)準(zhǔn)
• 元數(shù)據(jù)及其管理方式
• 數(shù)據(jù)沿襲和流經(jīng)系統(tǒng)
• 實(shí)施的路線圖

“如果你已經(jīng)掌握了所有這些東西，那么你就有機(jī)會(huì)獲得可行的數(shù)據(jù)架構(gòu)?！?/span>

數(shù)據(jù)架構(gòu)：如何失敗

• 試圖設(shè)計(jì)一個(gè)包含管理，處理，收集和存儲(chǔ)一切的架構(gòu)：“避免沸騰海洋。將您的架構(gòu)專(zhuān)注于對(duì)您的業(yè)務(wù)運(yùn)營(yíng)和運(yùn)營(yíng)至關(guān)重要的事情?！?/span>
• 由IT部門(mén)完全管理，驅(qū)動(dòng)和設(shè)計(jì)的數(shù)據(jù)架構(gòu)最終可能成為新技術(shù)的購(gòu)物清單，而不是支持業(yè)務(wù)戰(zhàn)略的計(jì)劃?！白鹬豂T部門(mén)的人員，他們并不總是了解數(shù)據(jù)如何支持業(yè)務(wù)戰(zhàn)略的最佳人選，因此，架構(gòu)需要如何發(fā)展以實(shí)現(xiàn)這一目標(biāo)?！?/span>
• 如果沒(méi)有業(yè)務(wù)和IT方面的高級(jí)管理層的積極支持，成功的可能性就不大。“它不應(yīng)該專(zhuān)門(mén)針對(duì)組織中間的人員。”
• 如果您的架構(gòu)過(guò)于復(fù)雜，則不太可能保持最新?tīng)顟B(tài)。特納分享了一個(gè)關(guān)于他作為顧問(wèn)工作的公司的故事。該公司有一個(gè)非常詳細(xì)的數(shù)據(jù)模型覆蓋整個(gè)房間的墻壁。他們?yōu)檫@個(gè)模型感到非常自豪，但在幾年的時(shí)間里，特納注意到同一個(gè)模型在同一面墻上，沒(méi)有變化，這意味著它不僅僅用于墻面裝飾。
• 長(zhǎng)期規(guī)劃很重要，但不要忽略具體的短期效益。他說(shuō)，數(shù)據(jù)架構(gòu)“如果你沒(méi)有附加硬件可交付成果，那仍然是一個(gè)夢(mèng)想?！苯⒁恍┛焖俚膭倮?。

做對(duì)了

有效數(shù)據(jù)架構(gòu)的主要功能包括與業(yè)務(wù)驅(qū)動(dòng)因素保持一致的數(shù)據(jù)戰(zhàn)略，針對(duì)基本數(shù)據(jù)，描繪明確的活動(dòng)和里程碑，并且具有足夠的靈活性，可隨業(yè)務(wù)需求和可用技術(shù)發(fā)展。最重要的是，架構(gòu)必須易于管理。“你永遠(yuǎn)無(wú)法在任何地方整理所有數(shù)據(jù)。你需要專(zhuān)注于真正有所作為的事情?！?/span>

制定數(shù)據(jù)戰(zhàn)略

特納概述了數(shù)據(jù)戰(zhàn)略的簡(jiǎn)單途徑。從業(yè)務(wù)戰(zhàn)略開(kāi)始，確定哪些數(shù)據(jù)對(duì)支持該戰(zhàn)略至關(guān)重要。評(píng)估您擁有的數(shù)據(jù)并確定是否由任務(wù)決定，如果不是，請(qǐng)確定改進(jìn)它所需的內(nèi)容。特納指出，改進(jìn)可能需要來(lái)自業(yè)務(wù)方面，而不是來(lái)自IT。例如，如果每個(gè)部門(mén)使用不同的代碼或術(shù)語(yǔ)來(lái)表示“客戶(hù)”，那么這顯然會(huì)影響業(yè)務(wù)戰(zhàn)略，可能需要改變以適應(yīng)這一障礙?！?/span>

今天的數(shù)據(jù)：范圍，規(guī)模和復(fù)雜性

在過(guò)去十年中，公司和組織正在處理的數(shù)據(jù)量大幅增加。目前存儲(chǔ)的所有數(shù)據(jù)中有90％剛剛在過(guò)去兩年中創(chuàng)建。換一種方式：

“地球上有2.5個(gè)五分之一的沙粒。順便說(shuō)一下，一個(gè)跟隨十八個(gè)零的人。每天創(chuàng)建三倍的數(shù)據(jù)字節(jié)數(shù)。所以，這個(gè)范圍和規(guī)模絕對(duì)是驚人的。“

?然而，這不只是關(guān)于范圍和規(guī)模，他說(shuō)。復(fù)雜性也是一個(gè)因素。因?yàn)樵S多公司還沒(méi)有掌握基礎(chǔ)知識(shí) - 數(shù)據(jù)管理，數(shù)據(jù)質(zhì)量以及確保所使用的數(shù)據(jù)符合預(yù)期目的 - “將來(lái)忘記所有新技術(shù)。這就是今天的現(xiàn)實(shí)?！?/span>

數(shù)據(jù)架構(gòu)的業(yè)務(wù)驅(qū)動(dòng)因素

商業(yè)智能和數(shù)據(jù)科學(xué)是數(shù)據(jù)架構(gòu)的驅(qū)動(dòng)因素，因?yàn)樗鼈兪荌T領(lǐng)域的強(qiáng)勁增長(zhǎng)領(lǐng)域。與此同時(shí)，降低成本，提高效率和遵守法規(guī)也為改善數(shù)據(jù)治理帶來(lái)了壓力。他說(shuō)，另一個(gè)原因是，“我懷疑，目前大多數(shù)組織管理數(shù)據(jù)的現(xiàn)狀仍然很差?！?/span>

他引用了去年在“哈佛商業(yè)評(píng)論”上發(fā)表的一項(xiàng)研究。研究人員調(diào)查了75家公司，要求這些公司的高級(jí)管理人員檢查一系列記錄的準(zhǔn)確性，這些記錄來(lái)自被認(rèn)為對(duì)公司有效運(yùn)營(yíng)至關(guān)重要的關(guān)鍵系統(tǒng)?！敖Y(jié)果真是令人震驚，”他說(shuō)，因?yàn)橐话賯€(gè)中只有三個(gè)記錄沒(méi)有錯(cuò)誤。“在這75家公司中檢查的所有記錄中有97％存在一些可能影響業(yè)務(wù)績(jī)效的嚴(yán)重錯(cuò)誤?！?/span>

特納表示，數(shù)據(jù)湖最大的問(wèn)題是缺乏有效的數(shù)據(jù)治理。由于缺乏一致的數(shù)據(jù)定義和元數(shù)據(jù)，因此當(dāng)人們?cè)L問(wèn)這些數(shù)據(jù)湖中的數(shù)據(jù)時(shí)，“他們并沒(méi)有得到最模糊的想法?！?/span>

他說(shuō)，為了從數(shù)據(jù)中獲得洞察力而獲得高工資的數(shù)據(jù)科學(xué)家卻花費(fèi)大部分時(shí)間做低級(jí)別任務(wù)，只是為了讓數(shù)據(jù)處于可用狀態(tài)。

“大數(shù)據(jù)和分析帶來(lái)的所有偉大承諾，以及公司正在收集的所有這些數(shù)據(jù) - 實(shí)際使用的不到百分之一。”

他將目前的情況比作滅火過(guò)程，而不是采取積極主動(dòng)的方式來(lái)預(yù)防火災(zāi)。我們需要的是一個(gè)連貫有效的數(shù)據(jù)架構(gòu)，重點(diǎn)是識(shí)別問(wèn)題，創(chuàng)建解決方案，并建立預(yù)防性的主動(dòng)治理。“換句話(huà)說(shuō)，你可以阻止火災(zāi)爆發(fā)，而不是等到火災(zāi)發(fā)生，然后以反應(yīng)的方式對(duì)抗它們?！?/span>

數(shù)據(jù)治理：從反應(yīng)式轉(zhuǎn)變?yōu)橹鲃?dòng)式

特納分享了全球數(shù)據(jù)戰(zhàn)略對(duì)數(shù)據(jù)治理的定義：以業(yè)務(wù)為主導(dǎo)的持續(xù)流程，為所有數(shù)據(jù)利益相關(guān)者的利益改進(jìn)數(shù)據(jù)。雖然最初的實(shí)施可能是作為一個(gè)項(xiàng)目開(kāi)始的，但“最終，你要確保它作為業(yè)務(wù)流程在后臺(tái)運(yùn)行，實(shí)際上與所有其他業(yè)務(wù)流程一起運(yùn)行。”

數(shù)據(jù)治理的七個(gè)關(guān)鍵原則

• 必須主動(dòng)管理數(shù)據(jù)
• 企業(yè)應(yīng)負(fù)責(zé)領(lǐng)導(dǎo)治理工作
• 企業(yè)必須確定改進(jìn)數(shù)據(jù)的優(yōu)先級(jí)，關(guān)注哪些數(shù)據(jù)以及應(yīng)該具有哪些影響
• 數(shù)據(jù)所有者必須對(duì)關(guān)鍵數(shù)據(jù)負(fù)責(zé)
• 數(shù)據(jù)管理員負(fù)責(zé)數(shù)據(jù)改進(jìn)
• IT提供了使數(shù)據(jù)治理在物理世界中真實(shí)的技術(shù)
• 組織中的每個(gè)人都必須作為任何數(shù)據(jù)治理活動(dòng)的一部分

“每個(gè)組織都需要數(shù)據(jù)架構(gòu)，但需要應(yīng)用的程度和位置因組織而異，沒(méi)有人比治理專(zhuān)業(yè)人員更好地幫助架構(gòu)師做出決策?！?/span>

他說(shuō)，數(shù)據(jù)治理和數(shù)據(jù)架構(gòu)相互支持和相互促進(jìn)。Turner?分享了概述數(shù)據(jù)治理和數(shù)據(jù)架構(gòu)之間協(xié)同作用的幻燈片，強(qiáng)調(diào)了兩者的關(guān)鍵優(yōu)勢(shì)。

數(shù)據(jù)管理員可以識(shí)別關(guān)鍵數(shù)據(jù)以及數(shù)據(jù)狀態(tài)如何影響業(yè)務(wù)，這有助于優(yōu)先構(gòu)建和發(fā)展架構(gòu)。數(shù)據(jù)所有者應(yīng)該告知有關(guān)在架構(gòu)中實(shí)現(xiàn)的數(shù)據(jù)的業(yè)務(wù)規(guī)則。業(yè)主和管家有能力作為冠軍并幫助建筑師為數(shù)據(jù)架構(gòu)的更多投資建立一個(gè)案例，因?yàn)椤八麄儗⒘私鈹?shù)據(jù)缺陷的當(dāng)前含義以及以更有條理的方式管理數(shù)據(jù)的重要性，”他說(shuō)過(guò)。

數(shù)據(jù)架構(gòu)可以通過(guò)在物理層面上制定治理策略來(lái)支持?jǐn)?shù)據(jù)治理，以便它們可以在現(xiàn)實(shí)世界中實(shí)施，而不僅僅是作為抽象概念。數(shù)據(jù)模型可以說(shuō)明哪些數(shù)據(jù)需要治理，并且可以突出顯示參考和主數(shù)據(jù)集，Turner說(shuō)，“需要成為組織中最密切的管理和擁有者?！睌?shù)據(jù)架構(gòu)有助于圍繞關(guān)鍵數(shù)據(jù)建立業(yè)務(wù)和IT共識(shí)，確保企業(yè)與IT合作執(zhí)行已確定的優(yōu)先事項(xiàng)。

使數(shù)據(jù)治理與數(shù)據(jù)架構(gòu)保持一致

特納說(shuō)你從哪里開(kāi)始并不重要。重要的是，數(shù)據(jù)架構(gòu)和數(shù)據(jù)治理的學(xué)科匯集在一起形成一個(gè)持續(xù)的改進(jìn)周期，確?！澳臄?shù)據(jù)越來(lái)越好，并根據(jù)業(yè)務(wù)需求不斷發(fā)展”。

特納以雅典衛(wèi)城的照片結(jié)束了他的演講，以說(shuō)明持久建筑的重要性。為了建造一座可以使用超過(guò)2500年的寺廟，希臘人花了很多時(shí)間練級(jí)和準(zhǔn)備它所在的山丘的基礎(chǔ)。

“任何渴望對(duì)數(shù)據(jù)做同樣的組織，換句話(huà)說(shuō) - 創(chuàng)建一個(gè)持久的，可忍受的數(shù)據(jù)驅(qū)動(dòng)的業(yè)務(wù) - 應(yīng)該認(rèn)識(shí)到你需要數(shù)據(jù)架構(gòu)和數(shù)據(jù)治理，并且他們需要共同努力，為未來(lái)?！?/span>