翁瑜卿

（中海油能源發(fā)展裝備技術(shù)有限公司 天津 300452）

0 引言

目前數(shù)據(jù)作為生產(chǎn)要素，已經(jīng)獲得官方的認(rèn)可，國(guó)家在政策層面大力推動(dòng)數(shù)字化產(chǎn)業(yè)的發(fā)展，明確要求政企加快數(shù)字化轉(zhuǎn)型、數(shù)據(jù)治理等工作。國(guó)務(wù)院頒布《關(guān)于加快推進(jìn)國(guó)有企業(yè)數(shù)字化轉(zhuǎn)型工作的通知》中，要求國(guó)企加快集團(tuán)數(shù)據(jù)治理體系建設(shè)，明確數(shù)據(jù)治理歸口管理部門(mén)，加強(qiáng)數(shù)據(jù)標(biāo)準(zhǔn)化、元數(shù)據(jù)和主數(shù)據(jù)管理工作，定期評(píng)估數(shù)據(jù)治理能力成熟度等。對(duì)于油氣能源企業(yè)而言，擁有龐大的數(shù)據(jù)體量，數(shù)據(jù)分類(lèi)的復(fù)雜度高，數(shù)據(jù)的專業(yè)性強(qiáng)，亟須通過(guò)數(shù)據(jù)治理，建立覆蓋面廣的數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)規(guī)則，提高數(shù)據(jù)質(zhì)量，實(shí)現(xiàn)數(shù)據(jù)對(duì)象全生命周期管理。

1 數(shù)據(jù)治理現(xiàn)狀

1.1 數(shù)據(jù)治理定義

關(guān)于數(shù)據(jù)治理有多種定義，在中國(guó)通信標(biāo)準(zhǔn)化協(xié)會(huì)發(fā)布的《數(shù)據(jù)治理標(biāo)準(zhǔn)化白皮書(shū)》[1]中，將數(shù)據(jù)治理定義為通過(guò)法律法規(guī)、管理制度、標(biāo)準(zhǔn)規(guī)范、技術(shù)工具等一系列手段，面向個(gè)人數(shù)據(jù)、企業(yè)數(shù)據(jù)、政府?dāng)?shù)據(jù)、公共數(shù)據(jù)等不同類(lèi)型數(shù)據(jù)對(duì)象全生命周期開(kāi)展有效的管控，以滿足企業(yè)管理、行業(yè)監(jiān)管、國(guó)家治理、國(guó)際協(xié)作等場(chǎng)景下數(shù)據(jù)應(yīng)用的要求[2]。

《“十四五”大數(shù)據(jù)產(chǎn)業(yè)發(fā)展規(guī)劃》[3]要求圍繞數(shù)據(jù)全生命周期，提高數(shù)據(jù)質(zhì)量，打造分類(lèi)科學(xué)、分級(jí)準(zhǔn) 確、管理有序的數(shù)據(jù)治理體系。并設(shè)置數(shù)據(jù)治理能力提升行動(dòng)，引導(dǎo)企業(yè)貫標(biāo)、鼓勵(lì)標(biāo)準(zhǔn)研究、加快重點(diǎn)標(biāo)準(zhǔn)研制、加速國(guó)際標(biāo)準(zhǔn)化進(jìn)程。

1.2 油氣能源行業(yè)數(shù)據(jù)治理實(shí)施面臨的困難

目前油氣能源公司大部分已經(jīng)開(kāi)展數(shù)據(jù)治理工作，在數(shù)據(jù)治理實(shí)施過(guò)程中，普遍遇到的幾大問(wèn)題：

（1）數(shù)據(jù)標(biāo)準(zhǔn)不統(tǒng)一

由于分屬于不同的集團(tuán)公司，國(guó)內(nèi)各油氣田當(dāng)前階段其生產(chǎn)運(yùn)行過(guò)程中所配套應(yīng)用的各類(lèi)數(shù)據(jù)管理與軟件系統(tǒng)也多種多樣，由于不同的數(shù)據(jù)與軟件系統(tǒng)其針對(duì)數(shù)據(jù)的管理遵循不同的標(biāo)準(zhǔn)，因此，數(shù)據(jù)呈現(xiàn)海量且雜亂的現(xiàn)象就成了國(guó)內(nèi)各油氣田目前階段數(shù)據(jù)的一大顯著特點(diǎn)，在生產(chǎn)中也出現(xiàn)了不同油氣田之間開(kāi)展相關(guān)業(yè)務(wù)時(shí)出現(xiàn)了數(shù)據(jù)標(biāo)準(zhǔn)不統(tǒng)一、不匹配的問(wèn)題，不得不再通過(guò)相關(guān)的軟件及數(shù)據(jù)處理系統(tǒng)進(jìn)行數(shù)據(jù)的轉(zhuǎn)移與轉(zhuǎn)換，給企業(yè)數(shù)據(jù)安全及數(shù)據(jù)利用效率都產(chǎn)生了諸多不利影響[4-5]。

（2）數(shù)據(jù)源頭界定不清

油氣能源行業(yè)專業(yè)性較強(qiáng)，涉及勘探、油藏、工程、建造、交付、運(yùn)營(yíng)等，在現(xiàn)有的環(huán)境下，每個(gè)環(huán)節(jié)都有自己的全生命周期管理系統(tǒng)，而各個(gè)系統(tǒng)極大概率會(huì)采集同源數(shù)據(jù)，該數(shù)據(jù)分布在各部門(mén)的數(shù)據(jù)系統(tǒng)中，這些復(fù)雜重復(fù)的數(shù)據(jù)，給數(shù)據(jù)清洗帶了非常大的難度，導(dǎo)致許多數(shù)據(jù)治理系統(tǒng)中定義的數(shù)據(jù)源頭界定不清。

（3）數(shù)據(jù)采集效率低

數(shù)據(jù)采集依賴于采集工具或采集系統(tǒng)，采集工具或采集系統(tǒng)的效率大大制約數(shù)據(jù)時(shí)效性，以及數(shù)據(jù)維護(hù)團(tuán)隊(duì)人力資源的投入。由于油氣能源行業(yè)的特殊性，許多數(shù)據(jù)源頭采集現(xiàn)場(chǎng)，受到網(wǎng)絡(luò)硬件資源，采集工具或采集系統(tǒng)的限制，許多數(shù)據(jù)源頭采集仍然由線下暫存，后續(xù)補(bǔ)錄的方式。這樣勢(shì)必造成數(shù)據(jù)時(shí)效性低，數(shù)據(jù)出錯(cuò)率高，數(shù)據(jù)采集人力資源投入量巨大的問(wèn)題。

（4）數(shù)據(jù)治理人才匱乏

數(shù)據(jù)治理的實(shí)施，針對(duì)油氣能源行業(yè)而言，數(shù)據(jù)治理團(tuán)隊(duì)不僅需要掌握數(shù)據(jù)采集工具、數(shù)據(jù)采集系統(tǒng)的了解，更加需要對(duì)涉及業(yè)務(wù)領(lǐng)域的專業(yè)數(shù)據(jù)擁有深入的理解。目前許多能源公司，通過(guò)委托外部數(shù)據(jù)公司的數(shù)據(jù)治理團(tuán)隊(duì)，對(duì)公司各部門(mén)進(jìn)行數(shù)據(jù)治理實(shí)施，但是介于能源行業(yè)的特殊性，許多數(shù)據(jù)是跨部門(mén)或者重疊產(chǎn)生，或者有專業(yè)關(guān)聯(lián)關(guān)系的存在，僅依靠通用數(shù)據(jù)治理人才，數(shù)據(jù)治理的實(shí)施將是事半功倍，拉長(zhǎng)完成數(shù)據(jù)治理的周期。目前的情況而言，亟須具備通用數(shù)據(jù)治理知識(shí)及業(yè)務(wù)領(lǐng)域知識(shí)的復(fù)合型人才。

2 油氣能源行業(yè)數(shù)據(jù)治理的研究

2.1 油氣能源行業(yè)數(shù)據(jù)特點(diǎn)分析

（1）數(shù)據(jù)的“隔離性”，數(shù)據(jù)均來(lái)自獨(dú)立物理隔離的信息系統(tǒng)或者是專業(yè)系統(tǒng)，各自都成了數(shù)據(jù)孤島。

（2）數(shù)據(jù)“多模態(tài)”，油氣系統(tǒng)數(shù)據(jù)來(lái)源多樣，結(jié)構(gòu)復(fù)雜。除生產(chǎn)過(guò)程中儀表所采集的溫度、壓力、流量等時(shí)序數(shù)據(jù)之外，還包括地質(zhì)數(shù)據(jù)、勘探數(shù)據(jù)、專業(yè)井控?cái)?shù)據(jù)等。

（3）數(shù)據(jù)的“關(guān)聯(lián)性”。油氣系統(tǒng)復(fù)雜，內(nèi)部系統(tǒng)多，導(dǎo)致系統(tǒng)關(guān)聯(lián)度高，生產(chǎn)狀態(tài)數(shù)據(jù)互相影響，或者因果關(guān)系，導(dǎo)致一處系統(tǒng)的數(shù)據(jù)采集錯(cuò)誤，勢(shì)必導(dǎo)致關(guān)聯(lián)系統(tǒng)出現(xiàn)問(wèn)題，因此，內(nèi)部系統(tǒng)數(shù)據(jù)關(guān)聯(lián)度極強(qiáng)。

（4）數(shù)據(jù)的“高通量”。實(shí)時(shí)設(shè)備檢測(cè)傳感器眾多所采集的時(shí)序數(shù)據(jù)具有內(nèi)部設(shè)備多、測(cè)點(diǎn)多、頻率高、吞吐量大、連續(xù)不間斷的特點(diǎn)。數(shù)據(jù)帶來(lái)巨大的存儲(chǔ)成本，還存在銜接不連貫、標(biāo)準(zhǔn)不統(tǒng)一、數(shù)據(jù)不對(duì)稱、無(wú)效數(shù)據(jù)等質(zhì)量問(wèn)題，無(wú)法為數(shù)據(jù)分析提供有效接口，如何提升數(shù)據(jù)價(jià)值密度、提高數(shù)據(jù)挖掘效率是現(xiàn)階段亟待解決的問(wèn)題[6]。

（5）數(shù)據(jù)的“重復(fù)性”。油氣項(xiàng)目涉及多部門(mén)銜接執(zhí)行項(xiàng)目，因此在數(shù)據(jù)移交時(shí)，對(duì)數(shù)據(jù)質(zhì)量的要求非常高，必須經(jīng)過(guò)審核或者第三方審核過(guò)的數(shù)據(jù)，才能夠進(jìn)入下一個(gè)流程環(huán)節(jié)，然而各個(gè)部門(mén)在對(duì)數(shù)據(jù)采集方面，又存在重疊的工作，移交后的數(shù)據(jù)，無(wú)法在接收部門(mén)進(jìn)行很好的管理，導(dǎo)致接收部門(mén)在自主系統(tǒng)中，仍然對(duì)重復(fù)的數(shù)據(jù)進(jìn)行采集。

2.2 油氣能源行業(yè)開(kāi)展數(shù)據(jù)治理案例的研究

根據(jù)對(duì)目前某油氣能源行業(yè)公司開(kāi)展數(shù)據(jù)治理實(shí)施的研究，該公司由集團(tuán)設(shè)立數(shù)據(jù)治理總部，各子分公司建立數(shù)據(jù)治理分部。首先由數(shù)據(jù)治理總部建立統(tǒng)一的標(biāo)準(zhǔn)及規(guī)范。

2.2.1 數(shù)據(jù)治理標(biāo)準(zhǔn)及規(guī)范制定

（1）數(shù)據(jù)標(biāo)準(zhǔn)制定，數(shù)據(jù)治理總部對(duì)現(xiàn)有整個(gè)油氣項(xiàng)目業(yè)務(wù)進(jìn)行頂層分析及設(shè)計(jì)，明確業(yè)務(wù)部門(mén)劃分。由各部門(mén)分別成立數(shù)據(jù)治理部門(mén)團(tuán)隊(duì)，各部門(mén)分別對(duì)各部門(mén)原有的元數(shù)據(jù)，主數(shù)據(jù)，及業(yè)務(wù)數(shù)據(jù)進(jìn)行第一次清洗，并匯總，匯總至數(shù)據(jù)治理總部，由總部數(shù)據(jù)治理團(tuán)隊(duì)及各部門(mén)專業(yè)人員一同，對(duì)匯總數(shù)據(jù)進(jìn)行第二次清洗，重復(fù)數(shù)據(jù)剔除，跨部門(mén)數(shù)據(jù)疑問(wèn)澄清等。完成元數(shù)據(jù)，主數(shù)據(jù)，及業(yè)務(wù)數(shù)據(jù)標(biāo)準(zhǔn)的編制，標(biāo)準(zhǔn)成果通過(guò)總部審核。

（2）數(shù)據(jù)采集規(guī)范，首先，從業(yè)務(wù)規(guī)范角度，以數(shù)據(jù)標(biāo)準(zhǔn)為基礎(chǔ)，由部門(mén)對(duì)數(shù)據(jù)標(biāo)準(zhǔn)與采集數(shù)據(jù)進(jìn)行映射，確定源頭采集數(shù)據(jù)與數(shù)據(jù)標(biāo)準(zhǔn)的數(shù)據(jù)邏輯含義一致，確保采集單位，采集內(nèi)容，采集時(shí)間等信息的完整。其次，管理規(guī)范流程中，確定源頭采集數(shù)據(jù)對(duì)應(yīng)的業(yè)務(wù)人員及劃分，落實(shí)數(shù)據(jù)采集崗位人員，審核崗人員等。再者，由于業(yè)務(wù)數(shù)據(jù)的產(chǎn)生存在時(shí)序關(guān)系，在采集規(guī)范中確定業(yè)務(wù)流程中各采集步驟的時(shí)效性，并且采集崗人員需使用采集工具對(duì)采集數(shù)據(jù)進(jìn)行核驗(yàn)后，再進(jìn)行系統(tǒng)上傳。各自部門(mén)根據(jù)自有業(yè)務(wù)流程，制定各自部門(mén)的采集規(guī)范后，交由數(shù)據(jù)治理總部進(jìn)行匯總（見(jiàn)圖1）。

圖1 數(shù)據(jù)采集規(guī)范結(jié)構(gòu)圖

（3）數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)，對(duì)采集數(shù)據(jù)實(shí)施多級(jí)數(shù)據(jù)審核，確保上線數(shù)據(jù)的規(guī)范性及準(zhǔn)確性。在數(shù)據(jù)用于決策時(shí)，保證數(shù)據(jù)的時(shí)效性。在數(shù)據(jù)綜合分析應(yīng)用時(shí)，保證數(shù)據(jù)的完整性。在數(shù)據(jù)邏輯關(guān)系中，保證數(shù)據(jù)的一致性。因此數(shù)據(jù)質(zhì)量不僅要保證數(shù)據(jù)的準(zhǔn)確性，也要保證數(shù)據(jù)的規(guī)范性、完整性、時(shí)效性、一致性，才能構(gòu)成一條高質(zhì)量的數(shù)據(jù)（見(jiàn)圖2）。

圖2 數(shù)據(jù)質(zhì)量屬性圖

其次，在數(shù)據(jù)治理標(biāo)準(zhǔn)及規(guī)范的基礎(chǔ)上，確定數(shù)據(jù)治理工作范圍及目標(biāo)。

2.2.2 數(shù)據(jù)治理工作范圍及目標(biāo)

（1）管理制度的制定：明確企業(yè)中各部門(mén)崗位職責(zé)的劃分，治理制度和流程制定，由數(shù)據(jù)治理總部決策，建立數(shù)據(jù)責(zé)任制及考核機(jī)制，增加數(shù)據(jù)采集崗位人員的積極性。

（2）數(shù)據(jù)治理范圍：明確企業(yè)數(shù)據(jù)治理的對(duì)象，數(shù)據(jù)治理的范圍，數(shù)據(jù)治理的數(shù)據(jù)深度。

（3）數(shù)據(jù)治理技術(shù)路線：明確企業(yè)數(shù)據(jù)治理技術(shù)路線，優(yōu)先考慮我國(guó)擁有自主知識(shí)產(chǎn)權(quán)的技術(shù)產(chǎn)品，避免西方的卡脖子問(wèn)題。打通各個(gè)系統(tǒng)間的隔閡，實(shí)現(xiàn)有效高速的數(shù)據(jù)共享通道，建立數(shù)據(jù)治理主系統(tǒng)。

（4）數(shù)據(jù)治理成熟度評(píng)估：需定期對(duì)企業(yè)的數(shù)據(jù)治理效果進(jìn)行評(píng)估，根據(jù)GB / T 34960.5—2018《信息技術(shù)服務(wù)治理第5部分：數(shù)據(jù)治理規(guī)范》[7]中，為了促進(jìn)組織有效、高效、合理地利用數(shù)據(jù)，有必要在數(shù)據(jù)獲取、存儲(chǔ)、整合、分析、應(yīng)用、呈現(xiàn)、歸檔和銷(xiāo)毀過(guò)程中，提出數(shù)據(jù)治理的相關(guān) 規(guī)范，規(guī)定了數(shù)據(jù)治理的頂層設(shè)計(jì)、數(shù)據(jù)治理環(huán)境、數(shù)據(jù)治理域及數(shù)據(jù)治理過(guò)程的要求，從而實(shí)現(xiàn)運(yùn)營(yíng)合規(guī)、風(fēng)險(xiǎn)可控和價(jià)值實(shí)現(xiàn)的目標(biāo)。

GB / T 36073—2018《數(shù)據(jù)管理能力成熟度評(píng)估模型》[8]適用于組織和機(jī)構(gòu)對(duì)內(nèi)部數(shù)據(jù)管理能力成熟度 進(jìn)行評(píng)估，給出了數(shù)據(jù)管理的8個(gè)能力域、能力成熟度評(píng)估模型以及成熟度等級(jí)，該標(biāo)準(zhǔn)取得了廣泛的關(guān)注 和認(rèn)可，為企業(yè)的數(shù)據(jù)管理能力提升提供了重要路徑和關(guān)鍵手段。構(gòu)建工業(yè)大數(shù)據(jù)管理能力評(píng)估體系，提升企業(yè)的數(shù)據(jù)管理能力，驗(yàn)證數(shù)據(jù)治理效果[9]。

（5）數(shù)據(jù)治理目標(biāo)：按照企業(yè)數(shù)據(jù)標(biāo)準(zhǔn)和采集規(guī)范，實(shí)現(xiàn)各分公司，各部門(mén)內(nèi)的數(shù)據(jù)達(dá)到數(shù)據(jù)治理的效果，確保主系統(tǒng)中的數(shù)據(jù)擁有五大屬性（見(jiàn)圖2）。數(shù)據(jù)治理后的數(shù)據(jù)有效地幫助企業(yè)實(shí)現(xiàn)真正的大數(shù)據(jù)分析及大數(shù)據(jù)應(yīng)用，實(shí)現(xiàn)數(shù)據(jù)的全生命周期管理，為企業(yè)帶來(lái)真正的經(jīng)濟(jì)價(jià)值。

最后，在完成數(shù)據(jù)治理標(biāo)準(zhǔn)及規(guī)范制定、落實(shí)數(shù)據(jù)治理工作范圍、確定工作目標(biāo)后，需對(duì)信息系統(tǒng)進(jìn)行相應(yīng)的改造，以及原有歷史數(shù)據(jù)清洗遷移。

2.2.3 信息系統(tǒng)改造及數(shù)據(jù)清洗遷移

（1）系統(tǒng)應(yīng)用性改造，根據(jù)數(shù)據(jù)標(biāo)準(zhǔn)及數(shù)據(jù)采集規(guī)范，對(duì)各部門(mén)已有業(yè)務(wù)系統(tǒng)進(jìn)行分析改造，將數(shù)據(jù)標(biāo)準(zhǔn)與現(xiàn)有系統(tǒng)數(shù)據(jù)庫(kù)數(shù)據(jù)屬性進(jìn)行對(duì)應(yīng)，排查疑問(wèn)數(shù)據(jù)，由專業(yè)工程師或跨部門(mén)工程師與數(shù)據(jù)治理團(tuán)隊(duì)進(jìn)行界定，確保疑問(wèn)數(shù)據(jù)通過(guò)各部門(mén)的審核，對(duì)數(shù)據(jù)庫(kù)數(shù)據(jù)屬性進(jìn)行修正，完成新的數(shù)據(jù)模型搭建。業(yè)務(wù)系統(tǒng)改造完成后，將系統(tǒng)數(shù)據(jù)共享至數(shù)據(jù)治理主系統(tǒng)對(duì)應(yīng)數(shù)據(jù)庫(kù)中，數(shù)據(jù)治理主系統(tǒng)實(shí)現(xiàn)對(duì)各業(yè)務(wù)系統(tǒng)的信息抽取。

（2）歷史數(shù)據(jù)清洗遷移，由于油氣行業(yè)數(shù)據(jù)產(chǎn)生周期較長(zhǎng)，歷史數(shù)據(jù)跨越的年份較久，歷史數(shù)據(jù)分為非系統(tǒng)歷史數(shù)據(jù)，系統(tǒng)歷史數(shù)據(jù)。對(duì)于非系統(tǒng)歷史數(shù)據(jù)，需要人為進(jìn)行梳理，錄入到數(shù)據(jù)治理主系統(tǒng)。系統(tǒng)歷史數(shù)據(jù)，分析歷史數(shù)據(jù)是否符合改造后系統(tǒng)，若符合系統(tǒng)要求，則僅需對(duì)數(shù)據(jù)進(jìn)行核對(duì)，無(wú)需再次采集。若不符合系統(tǒng)要求，則需對(duì)歷史數(shù)據(jù)進(jìn)行線下數(shù)據(jù)復(fù)核及采集。

3 結(jié)論

本文研究了目前油氣能源行業(yè)實(shí)施數(shù)據(jù)治理的案例，案例以管理制度、數(shù)據(jù)標(biāo)準(zhǔn)、采集規(guī)范為基礎(chǔ)，對(duì)各業(yè)務(wù)系統(tǒng)進(jìn)行標(biāo)準(zhǔn)化的改造，實(shí)現(xiàn)各業(yè)務(wù)系統(tǒng)數(shù)據(jù)的標(biāo)準(zhǔn)化，使得該企業(yè)提高了業(yè)務(wù)數(shù)據(jù)的質(zhì)量，也為數(shù)據(jù)后續(xù)實(shí)現(xiàn)全生命周期管理打下了堅(jiān)實(shí)的基礎(chǔ)。該案例對(duì)于解決數(shù)據(jù)治理目前普遍遇到的問(wèn)題，也有非常大的借鑒作用。

隨著未來(lái)越來(lái)越多新的技術(shù)及解決方案的引入，油氣能源行業(yè)的數(shù)據(jù)能夠發(fā)揮更多的數(shù)據(jù)價(jià)值，產(chǎn)生更多的經(jīng)濟(jì)效益。