張遠(yuǎn) 熊靜 王羽 周潔 劉詩儀 張亦民 張虹
【摘 要】 近年來民航領(lǐng)域的數(shù)據(jù)規(guī)模越來越巨大,但民航數(shù)據(jù)分布分散,數(shù)據(jù)結(jié)構(gòu)存在差異形成了數(shù)據(jù)孤島,沒有得到有效治理。如何管理和利用數(shù)據(jù),使其發(fā)揮價(jià)值,對個(gè)體及其企業(yè)做出貢獻(xiàn),是企業(yè)必須考慮的重要問題。為了使民航大數(shù)據(jù)有效治理,本文通過對民航元數(shù)據(jù)管理, 主數(shù)據(jù)管理,數(shù)據(jù)質(zhì)量管理,數(shù)據(jù)標(biāo)準(zhǔn)化管理等方面對民航大數(shù)據(jù)進(jìn)行分析,對民航大數(shù)據(jù)資源治理的具體機(jī)制進(jìn)行了研究,初步形成了民航大數(shù)據(jù)資源治理架構(gòu)。
【關(guān)鍵詞】 大數(shù)據(jù)資源治理 民航 元數(shù)據(jù) 主數(shù)據(jù)
引 言
民航信息化普及程度比較高,大量的民航機(jī)構(gòu)、從業(yè)人員產(chǎn)生了海量的行業(yè)相關(guān)數(shù)據(jù),這些數(shù)據(jù)分布在民航業(yè)不同的機(jī)構(gòu),數(shù)據(jù)異構(gòu)嚴(yán)重。民航企業(yè)目前龐大的現(xiàn)存數(shù)據(jù)中,75%都是非結(jié)構(gòu)化數(shù)據(jù),包括各種文字,語音,圖像,視頻,社交關(guān)系,空間軌跡等。因?yàn)樾袠I(yè)數(shù)據(jù)量較大,分布比較分散,導(dǎo)致數(shù)據(jù)整合能力較低,大量的行業(yè)信息被淹沒在海量數(shù)據(jù)當(dāng)中,沒有得到充分的利用。各個(gè)信息化系統(tǒng)之間數(shù)據(jù)結(jié)構(gòu)存在差異,形成了數(shù)據(jù)孤島,沒有形成民航領(lǐng)域內(nèi)有效的數(shù)據(jù)治理機(jī)制。
2013年,王瑋[1]指出有效治理大數(shù)據(jù)和挖掘分析其潛在的業(yè)務(wù)價(jià)值,是商業(yè)銀行面臨的新課題,從大數(shù)據(jù)時(shí)代的機(jī)遇和挑戰(zhàn),剖析數(shù)據(jù)治理面臨的問題,并基于制定數(shù)據(jù)標(biāo)準(zhǔn)體系和流程、數(shù)據(jù)質(zhì)量規(guī)劃、評估和管理模式等方面提出大數(shù)據(jù)時(shí)代的數(shù)據(jù)治理措施。2014年,曾鋒[2]針對貴陽機(jī)場各系統(tǒng)獨(dú)立分散現(xiàn)狀,自主設(shè)計(jì)構(gòu)建了數(shù)據(jù)管理集成系統(tǒng),詳盡解析了數(shù)據(jù)管理集成系統(tǒng)的結(jié)構(gòu)、功能和實(shí)現(xiàn)途徑。2015年,李湘濱、鄭蕓、熊國民[3]結(jié)合中國民航的實(shí)際情況,提出了一種適用于開放平臺旅客服務(wù)信息系統(tǒng)的主數(shù)據(jù)識別與管理方法,設(shè)計(jì)了主數(shù)據(jù)管理系統(tǒng)的功能架構(gòu),并分析了適用于此系統(tǒng)架構(gòu)的兩種關(guān)鍵技術(shù)。
由上述研究綜述可知,民航信息化經(jīng)過的多年的發(fā)展,基礎(chǔ)設(shè)施比較完善,信息化系統(tǒng)也得到了廣泛的應(yīng)用,同時(shí)也儲存了大量的操作數(shù)據(jù)以及事務(wù)數(shù)據(jù),但一直以來對數(shù)據(jù)的管理研究主要集中在結(jié)構(gòu)化數(shù)據(jù)的分析,民航大數(shù)據(jù)治理相關(guān)研究起步較晚,研究成果較少,較少,因此本文將對民航大數(shù)據(jù)治理機(jī)制進(jìn)行具體研究具有理論和現(xiàn)實(shí)意義。。
1民航元數(shù)據(jù)管理
元數(shù)據(jù)是描述數(shù)據(jù)倉庫內(nèi)數(shù)據(jù)的結(jié)構(gòu)和建立方法的數(shù)據(jù),可將其按用途的不同分為兩類:技術(shù)元數(shù)據(jù)(Technical Metadata)和業(yè)務(wù)元數(shù)據(jù)(Business Metadata)。
民航企業(yè)可以研究以O(shè)MG的公共倉庫元模型為核心的元數(shù)據(jù)集成體系結(jié)構(gòu)。在明確了元數(shù)據(jù)集成體系結(jié)構(gòu)之后,民航企業(yè)可以根據(jù)需要選擇合適的業(yè)務(wù)元數(shù)據(jù)和技術(shù)元數(shù)據(jù)管理工具,并制定相應(yīng)的元數(shù)據(jù)管理制度進(jìn)行全面的元數(shù)據(jù)管理。
民航大數(shù)據(jù)管理涉及到氣象信息,航班信息,客票訂座信息,地面服務(wù)信息等多個(gè)功能信息,各個(gè)功能的數(shù)據(jù)必須按照一定的模式存入數(shù)據(jù)倉庫中。數(shù)據(jù)倉庫中數(shù)據(jù)的對應(yīng)關(guān)系及轉(zhuǎn)換規(guī)則都要存儲在元數(shù)據(jù)知識庫中。忽視元數(shù)據(jù)管理,就會(huì)使數(shù)據(jù)集成出現(xiàn)混亂的局面,很難進(jìn)行數(shù)據(jù)倉庫的集成。
民航大數(shù)據(jù)數(shù)據(jù)容量大,具有多樣性,75%是非結(jié)構(gòu)化數(shù)據(jù)。通過創(chuàng)建體現(xiàn)關(guān)鍵大數(shù)據(jù)業(yè)務(wù)術(shù)語的業(yè)務(wù)定義詞庫(本體),該業(yè)務(wù)定義詞庫不僅包含結(jié)構(gòu)化數(shù)據(jù),還可以將半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)納入其中。通過構(gòu)建基礎(chǔ)本體、領(lǐng)域本體、任務(wù)本體和應(yīng)用本體,在整個(gè)企業(yè)范圍提供一個(gè)完整的共享詞匯表,保證每個(gè)元數(shù)據(jù)元素在信息供應(yīng)鏈中每個(gè)組件的語義上保持一致。
2民航主數(shù)據(jù)管理
主數(shù)據(jù)是指在整個(gè)企業(yè)范圍內(nèi)各個(gè)系統(tǒng)間要共享的、高價(jià)值的數(shù)據(jù),也稱企業(yè)基準(zhǔn)數(shù)據(jù)[4]。那么民航主數(shù)據(jù)就是在民航企業(yè)中各個(gè)系統(tǒng)所共享的有價(jià)值的數(shù)據(jù),這些數(shù)據(jù)在被整理之前,分散于各個(gè)系統(tǒng)中,而民航主數(shù)據(jù)可以達(dá)到讓這些數(shù)據(jù)通過集中整理分析,存儲于同一系統(tǒng)中,這樣可以更加方便快捷的查找并整合出最有價(jià)值的數(shù)據(jù)。
在民航主數(shù)據(jù)管理的應(yīng)用方面,民航主數(shù)據(jù)管理應(yīng)用于民航氣象信息和民航客票訂座信息管理等方面。
①民航氣象信息:民航主數(shù)據(jù)管理系統(tǒng)可以收集并整理某個(gè)指定地區(qū)的所有氣象信息,并且可以通過比對和分析,準(zhǔn)確推斷出未來某段時(shí)間的氣象狀況,為民航飛機(jī)航行安全做保證。
②民航客票訂座信息:民航主數(shù)據(jù)管理系統(tǒng)可以根據(jù)乘客購買車票以及乘坐航班的實(shí)際乘客數(shù)量進(jìn)行大數(shù)據(jù)分析,計(jì)算出最優(yōu)的客票訂座方案,從而使航空公司的利益達(dá)到最大化。
3民航數(shù)據(jù)質(zhì)量管理
高質(zhì)量的數(shù)據(jù)是大數(shù)據(jù)發(fā)揮作用的前提。如果不對大數(shù)據(jù)進(jìn)行有效的數(shù)據(jù)質(zhì)量管理,會(huì)使大數(shù)據(jù)會(huì)對決策產(chǎn)生有害的結(jié)果。大多數(shù)民航企業(yè)慢慢只能做到實(shí)時(shí)收集大數(shù)據(jù),不注重對數(shù)據(jù)進(jìn)行質(zhì)量方面的管理,導(dǎo)致數(shù)據(jù)雜亂無章,最終成為無用的數(shù)據(jù)垃圾。如此大大降低了民航業(yè)對顧客的服務(wù)質(zhì)量,降低了民航業(yè)的運(yùn)營能力,以及與其他行業(yè)相比的競爭力。
6σ管理法是一種統(tǒng)計(jì)評估法,采用希臘字母“σ”來衡量標(biāo)準(zhǔn)偏差。6σ管理法強(qiáng)調(diào)制定極高的目標(biāo)、收集數(shù)據(jù)以及分析結(jié)果,以減少產(chǎn)品和服務(wù)缺陷,是一種改善企業(yè)質(zhì)量流程管理的技術(shù)。主要運(yùn)用DMAIC模式,即Define、Measure、Analyze、Improve、Control五個(gè)步驟來改進(jìn)項(xiàng)目。[5]可以采用基于6σ管理法方法對民航大數(shù)據(jù)進(jìn)行質(zhì)量管理。以下是在訂座信息管理領(lǐng)域的質(zhì)量管理步驟。
(1)Define
對訂座信息的數(shù)據(jù)進(jìn)行從準(zhǔn)確性、一致性、時(shí)效性、唯一性等方面進(jìn)行質(zhì)量評估,為數(shù)據(jù)質(zhì)量分析提供標(biāo)準(zhǔn)和依據(jù)。
(2)Measure
收集航空訂座信息等數(shù)據(jù),并從最多的和最少的訂座位置、消費(fèi)者訂座的時(shí)間段等進(jìn)行測量,并進(jìn)行整理。此階段是后續(xù)分析、改進(jìn)和控制階段的基礎(chǔ)。
(3)Analyze
對于上階段所測量的訂座信息數(shù)據(jù),通過對比分析整理的數(shù)據(jù),得出消費(fèi)者的訂座偏好以及較為集中的訂座時(shí)間段;進(jìn)一步分析得出消費(fèi)者的訂座偏好和訂座時(shí)間往往由哪些因素所決定。
(4)Improve
針對于訂座信息數(shù)據(jù)而言,航空企業(yè)應(yīng)按分析得出的結(jié)果制定出方案,如怎樣營銷才能使消費(fèi)者不集中在靠窗位置的偏愛、才能使消費(fèi)者“雨露均沾”;根據(jù)消費(fèi)者傾向的訂座時(shí)間應(yīng)該如何調(diào)整訂票開始時(shí)間以及優(yōu)惠政策。
(5)Control
在大數(shù)據(jù)的質(zhì)量管理控制階段,在選擇并確定了上述一種方案后,應(yīng)有專人監(jiān)控實(shí)施方案后消費(fèi)者對訂座的滿意度、訂座帶來的盈利等信息數(shù)據(jù),并及時(shí)進(jìn)行改正和控制。
4民航數(shù)據(jù)標(biāo)準(zhǔn)化管理
2018年已經(jīng)是中國民航信息化發(fā)展的第33年。在民航信息化領(lǐng)域,我國已經(jīng)建立了一系列基礎(chǔ)民航信息系統(tǒng)來初步幫助民航信息管理,但是隨著科學(xué)技術(shù)的日益提高,中國民航也高速發(fā)展,民航信息管理面對的問題也越來越多,但是現(xiàn)有的信息系統(tǒng)并不能解決全部問題,并且對于現(xiàn)在日益嚴(yán)格的客戶要求難以滿足。因此我們在大力發(fā)展民航信息系統(tǒng)的階段,務(wù)必要對數(shù)據(jù)標(biāo)準(zhǔn)化進(jìn)行管理。
數(shù)據(jù)標(biāo)準(zhǔn)化意味著我們要為這些民航大數(shù)據(jù),例如氣象信息、航班信息、訂座信息等制定一個(gè)標(biāo)準(zhǔn),并進(jìn)行標(biāo)準(zhǔn)化的管理。
數(shù)據(jù)標(biāo)準(zhǔn)管理由數(shù)據(jù)標(biāo)準(zhǔn)規(guī)劃、數(shù)據(jù)標(biāo)準(zhǔn)化實(shí)施、數(shù)據(jù)標(biāo)準(zhǔn)反饋這三部分內(nèi)容組成,而重點(diǎn)在于數(shù)據(jù)標(biāo)準(zhǔn)化實(shí)施階段,由此又可細(xì)分為:數(shù)據(jù)標(biāo)準(zhǔn)制定、數(shù)據(jù)標(biāo)準(zhǔn)匹配,數(shù)據(jù)標(biāo)準(zhǔn)執(zhí)行、數(shù)據(jù)標(biāo)準(zhǔn)維護(hù)和數(shù)據(jù)標(biāo)準(zhǔn)監(jiān)控。
數(shù)據(jù)標(biāo)準(zhǔn)制定包括單詞標(biāo)準(zhǔn)化、數(shù)據(jù)規(guī)范化,確??煽康男畔碓匆约靶畔⒌募皶r(shí)性、準(zhǔn)確性。
數(shù)據(jù)標(biāo)準(zhǔn)匹配主要是把四面八方收集來的信息(氣象、客票訂座、航班號等)準(zhǔn)確地結(jié)合起來,提高工作組的高作效率。
數(shù)據(jù)標(biāo)準(zhǔn)執(zhí)行是指在數(shù)據(jù)匹配完之后各民航企業(yè)的系統(tǒng)按照統(tǒng)一制定的標(biāo)準(zhǔn)開始實(shí)踐。
數(shù)據(jù)標(biāo)準(zhǔn)維護(hù)是指在數(shù)據(jù)標(biāo)準(zhǔn)管理的同時(shí)時(shí)刻反饋運(yùn)作狀態(tài),并根據(jù)當(dāng)前及未來可能發(fā)生的情況進(jìn)行修復(fù)和升級以減少錯(cuò)誤率。
數(shù)據(jù)標(biāo)準(zhǔn)監(jiān)控是指在數(shù)據(jù)標(biāo)準(zhǔn)執(zhí)行的過程中,對數(shù)據(jù)的流通、加工及傳送進(jìn)行監(jiān)視,并且及時(shí)反饋效果,同時(shí)也為數(shù)據(jù)標(biāo)準(zhǔn)的維護(hù)提供服務(wù)支持。
結(jié)束語
本文首先分析了大數(shù)據(jù)如今的現(xiàn)狀以及民航大數(shù)據(jù)的具體困境,其次通過數(shù)據(jù)標(biāo)準(zhǔn)化管理,數(shù)據(jù)質(zhì)量管理,主數(shù)據(jù)管理,和元數(shù)據(jù)管理對民航大數(shù)據(jù)資源治理機(jī)制進(jìn)行了研究,初步形成了民航大數(shù)據(jù)治理架構(gòu),但研究不夠深入,缺乏實(shí)踐性,希望有朝一日能完全實(shí)現(xiàn)民航大數(shù)據(jù)資源治理。
【參考文獻(xiàn)】
[1] 王瑋大數(shù)據(jù)時(shí)代的商業(yè)銀行數(shù)據(jù)治理研究[J].中國金融電腦,2013,(7):36-38.
[2] 曾鋒.機(jī)場數(shù)據(jù)管理集成系統(tǒng)的設(shè)計(jì)應(yīng)用[J].現(xiàn)代機(jī)械,2012(3):83-85.
[3] 李湘濱、鄭蕓、熊國民. 面向民航開放平臺的主數(shù)據(jù)識別與管理[J]. 計(jì)算機(jī)與數(shù)字工程,2015(7):1304-1327.
[4] 李雋。主數(shù)據(jù)管理在供電企業(yè)中的應(yīng)用研究[J].電力信息化,2010,9:9-12.
[5] 楊晶、陳曉冬.對6σ管理法的認(rèn)識[J].發(fā)展,2006(12):78-79