真心實(shí)意

2023-03-24

中國東方航空股份有限公司（以下簡稱東航）是中國民航業(yè)內(nèi)第一家上市公司，也是民航業(yè)首批簽約加入上海數(shù)據(jù)交易所的數(shù)商。東航于2003年開發(fā)了第一個(gè)報(bào)表系統(tǒng)，2017年啟動(dòng)數(shù)據(jù)治理工作，得益于東航對信息化發(fā)展和數(shù)字化轉(zhuǎn)型的高度重視，2021年東航管用結(jié)合型的數(shù)據(jù)治理模式成功入選國資企業(yè)標(biāo)桿模式。

1.項(xiàng)目背景

近幾年，東方航空已經(jīng)建設(shè)了各種數(shù)據(jù)集市、數(shù)據(jù)倉庫，但隨著業(yè)務(wù)系統(tǒng)和數(shù)據(jù)量的增多，數(shù)據(jù)一致性問題和業(yè)務(wù)指標(biāo)口徑不一致問題日益凸顯，影響了東航對海量數(shù)據(jù)的有效利用。

機(jī)場作為保障單位，對數(shù)據(jù)質(zhì)量的要求非常高。首先是數(shù)據(jù)的完整性，要確保每個(gè)航班的每一個(gè)節(jié)點(diǎn)都能發(fā)送相應(yīng)的數(shù)據(jù)。其次是數(shù)據(jù)的及時(shí)性，航班的保障時(shí)間向來爭分奪秒，必須在航班保障節(jié)點(diǎn)發(fā)生時(shí)能夠?qū)崟r(shí)將數(shù)據(jù)發(fā)送出去。第三是數(shù)據(jù)的準(zhǔn)確性，由于節(jié)點(diǎn)較多，可能因?yàn)槿斯げ杉吞顖?bào)的過程中出現(xiàn)問題，導(dǎo)致數(shù)據(jù)保障節(jié)點(diǎn)前后發(fā)生錯(cuò)誤。

2.建設(shè)內(nèi)容

為加強(qiáng)數(shù)據(jù)管理，提升數(shù)據(jù)質(zhì)量，億信華辰幫助東航建立了數(shù)據(jù)質(zhì)量智能管理系統(tǒng)，以元數(shù)據(jù)為基礎(chǔ)，以基礎(chǔ)數(shù)據(jù)標(biāo)準(zhǔn)和質(zhì)量數(shù)據(jù)標(biāo)準(zhǔn)為參考依據(jù)，通過機(jī)器學(xué)習(xí)和相似度算法相結(jié)合，實(shí)現(xiàn)智能且精準(zhǔn)的落標(biāo)效果，并自動(dòng)轉(zhuǎn)換出完整的數(shù)據(jù)質(zhì)量規(guī)則庫，遵循PDCA模型原則，檢查并整改數(shù)據(jù)質(zhì)量問題，逐步提高數(shù)據(jù)質(zhì)量，東航數(shù)據(jù)支撐能力和行業(yè)競爭力顯著提升。


技術(shù)架構(gòu)圖

項(xiàng)目亮點(diǎn)：

智能質(zhì)量規(guī)則庫：機(jī)器學(xué)習(xí)和相似度算法相結(jié)合，建立能夠表示標(biāo)注數(shù)據(jù)集的語言模型，找到匹配度最高的元數(shù)據(jù)與數(shù)據(jù)標(biāo)準(zhǔn)關(guān)系并推薦落標(biāo)，提升基礎(chǔ)數(shù)據(jù)標(biāo)準(zhǔn)落標(biāo)效率和標(biāo)準(zhǔn)覆蓋率。自動(dòng)將有落標(biāo)關(guān)系的數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)，轉(zhuǎn)換為對應(yīng)的技術(shù)質(zhì)量規(guī)則，從而執(zhí)行后續(xù)的質(zhì)檢操作。

數(shù)據(jù)質(zhì)量管控：通過業(yè)務(wù)數(shù)據(jù)質(zhì)量規(guī)范形成的技術(shù)質(zhì)檢規(guī)則，定期檢查業(yè)務(wù)數(shù)據(jù)的正確性，導(dǎo)出質(zhì)量報(bào)告或質(zhì)量問題跟蹤矩陣，監(jiān)控錯(cuò)誤數(shù)據(jù)整改過程，將質(zhì)量評估、質(zhì)量檢核、質(zhì)量整改等工作環(huán)節(jié)進(jìn)行流程整合，形成完整的數(shù)據(jù)質(zhì)量管控閉環(huán)。



4.項(xiàng)目價(jià)值

（1）智能算法升級落標(biāo)效率

機(jī)器學(xué)習(xí)和相似度算法結(jié)合，將現(xiàn)有元數(shù)據(jù)和數(shù)據(jù)標(biāo)準(zhǔn)已落標(biāo)的數(shù)據(jù)進(jìn)行模型訓(xùn)練，并且結(jié)合所有數(shù)據(jù)標(biāo)準(zhǔn)的中英文名相似庫，實(shí)現(xiàn)更加精準(zhǔn)和智能的落標(biāo)效果。

（2）完整的數(shù)據(jù)質(zhì)量管控流程

通過數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)所形成的規(guī)則和自定義的復(fù)雜質(zhì)量檢查規(guī)則，結(jié)合質(zhì)量評分和質(zhì)量方案預(yù)警機(jī)制，從而實(shí)現(xiàn)對數(shù)據(jù)的質(zhì)量長期有效的實(shí)時(shí)監(jiān)控，并且可結(jié)合流程進(jìn)行線上、線下管理，完成問題數(shù)據(jù)整改和跟蹤。