張春燕 王國玲
(中海油信息科技有限公司信息技術分公司 天津 300450)
當前,隨著世界經(jīng)濟全球化不斷地走深走實,國內(nèi)各類企業(yè)在市場上面臨越來越激烈的競爭,不論是國內(nèi)市場還是國外市場,國內(nèi)企業(yè)均面臨來自多方面的機遇與挑戰(zhàn)。所以,當前企業(yè)增強互聯(lián)網(wǎng)意識和信息化基礎建設顯得非常重要。根據(jù)已有的信息統(tǒng)計,在過去的很長一段時間內(nèi),全球企業(yè)在信息化建設上投入了大量的資金和技術支持。為了保護企業(yè)內(nèi)部的機密、結(jié)構(gòu)與穩(wěn)定性,各種國內(nèi)企業(yè)建立了各自的專屬信息化技術管理系統(tǒng),幫助企業(yè)提高生產(chǎn)效率,創(chuàng)造更大的效益和價值。本文正是在此大背景下,介紹企業(yè)數(shù)據(jù)管理的現(xiàn)狀,介紹企業(yè)主數(shù)據(jù)管理系統(tǒng)的架構(gòu),分析企業(yè)實現(xiàn)主數(shù)據(jù)管理的方法,總結(jié)相關經(jīng)驗,為后續(xù)企業(yè)數(shù)據(jù)管理提供參考價值。
在當前已有的國內(nèi)優(yōu)秀企業(yè)當中,尤其是國有企業(yè)、大型的私有企業(yè)等,其已經(jīng)跟上了時代的步伐,形成了一些比較先進的管理經(jīng)驗,建設了屬于本企業(yè)的信息化管理技術。在企業(yè)信息化管理當中,普遍存在多個不同的企業(yè)數(shù)據(jù)管理系統(tǒng)。這些管理系統(tǒng)在每日的數(shù)據(jù)處理當中會產(chǎn)生龐大的數(shù)據(jù)庫,因此,需要專人對其進行管理,來應對企業(yè)大數(shù)據(jù)體量下的運行與發(fā)展。已有的企業(yè)數(shù)據(jù),不僅包括滿足企業(yè)基礎運行的云數(shù)據(jù),也包括過去企業(yè)發(fā)展當中保留的歷史遺留數(shù)據(jù)。歷史遺留數(shù)據(jù)是不需要后續(xù)繼續(xù)使用的,因此,在發(fā)展過程中可以定期對其進行清除。若從數(shù)據(jù)的共享性與變化的角度來看,也可以把數(shù)據(jù)分為交流數(shù)據(jù)與主流數(shù)據(jù),這兩種數(shù)據(jù)從時間的角度上看,都屬于主數(shù)據(jù),也可稱之為當前數(shù)據(jù)。在實際的管理中,企業(yè)的信息技術管理人員需要將不同的數(shù)據(jù),采用不同的辦法,對其進行處理與分類,這也是一種高效的數(shù)據(jù)管理方式[1]。
目前來看,企業(yè)的數(shù)據(jù)可以分為正在運行當中的主流數(shù)據(jù)和出現(xiàn)故障亟需維修的備用數(shù)據(jù)。這兩種數(shù)據(jù)在運行過程中,其數(shù)量會發(fā)生轉(zhuǎn)化,換言之,主流數(shù)據(jù)可能會轉(zhuǎn)化成備用數(shù)據(jù),而備用數(shù)據(jù)經(jīng)過維修后也可轉(zhuǎn)化成為主流數(shù)據(jù)?,F(xiàn)今,在“互聯(lián)網(wǎng)+”時代,國內(nèi)大多數(shù)企業(yè)還沒有形成全面、系統(tǒng)的主流數(shù)據(jù)管理模式,很多管理經(jīng)驗還借鑒于國外的優(yōu)秀企業(yè)。企業(yè)內(nèi)部分主流數(shù)據(jù)往往并沒有整合在一起,大多分布在企業(yè)內(nèi)多個不同的業(yè)務系統(tǒng)當中。而不同的業(yè)務系統(tǒng)有其各自的基本發(fā)展模式,有些管理辦法在系統(tǒng)內(nèi)并不適用,所以目前來看,亟須形成一種完善的企業(yè)數(shù)據(jù)管理模式。
當前,國內(nèi)主流企業(yè)主要有以下兩種管理內(nèi)部數(shù)據(jù)的方式。
第一種是分散式管理。在此管理模式中,企業(yè)內(nèi)的各個信息系統(tǒng)的關聯(lián)應用會歸屬于各自不同的管理渠道,也就是所謂的各司其職管理方式。但是這種管理方式存在一個弊端,那就是信息調(diào)用比較困難。如果企業(yè)要想調(diào)用相關聯(lián)系統(tǒng)中的數(shù)據(jù),或者是把其他數(shù)據(jù)進行整合來滿足關聯(lián)系統(tǒng)使用,則需要采取比較繁瑣的方式進行調(diào)用。例如,企業(yè)內(nèi)人力資源池需管理客戶關系,必然要建立企業(yè)與客戶、企業(yè)內(nèi)部員工等多種人員關系的管理方式[2]。然而,這些系統(tǒng)應用數(shù)據(jù)可能歸屬各個不同的部門,人力資源部門往往對其難以把握。因此,企業(yè)可以考慮在人力資源總系統(tǒng)中建立多種人員關系的管理模式,或者放開管理權(quán)限,讓人力資源部門的工作人員參與管理,這樣也可以使管理的效率得到提升,并且提高管理質(zhì)量。所以,企業(yè)總的管理方式必然不是分散的,而是最終要匯聚在一起的,這才是未來企業(yè)管理的大方向。
第二種管理方式就是現(xiàn)在比較常見的統(tǒng)一數(shù)據(jù)管理模式。企業(yè)根據(jù)各種不同的管理辦法,將各個部門所管理的第一手數(shù)據(jù)進行處理與分析,然后統(tǒng)一歸整到企業(yè)最終的總數(shù)據(jù)庫中,在總數(shù)據(jù)庫中統(tǒng)籌進行調(diào)用、管理、運行,而權(quán)限歸屬于企業(yè)的主要領導人員所有。這種數(shù)據(jù)庫的問題在于數(shù)據(jù)體量龐大,后期不便于維護,若數(shù)據(jù)庫在運行中出現(xiàn)數(shù)據(jù)的錯誤或遺失,則會影響其他數(shù)據(jù)的使用,造成數(shù)據(jù)的“多米諾骨牌”效應。但是仍然不可否認,這種管理模式具有其他管理模式所沒有的優(yōu)點,它不僅具有比較強的安全性,便于維護,也可以從已有的管理系統(tǒng)當中較快且全面地進行調(diào)用。例如,如果某數(shù)據(jù)出現(xiàn)了異常,需要停止數(shù)據(jù)庫運行進行維護,則中央處理器可以考慮將主數(shù)據(jù)管理系統(tǒng)的問題提前告知各個子系統(tǒng),各個子系統(tǒng)則會停止運行,待主系統(tǒng)的問題處理完畢后,再進行運行,這樣極大地提高了數(shù)據(jù)的處理與信息的使用效率,從而能夠?qū)崿F(xiàn)主數(shù)據(jù)的管理與維修一體化,維護了企業(yè)的數(shù)據(jù)安全,提高了主數(shù)據(jù)的運行效率[3]。
眾所周知,當前已有的主數(shù)據(jù)管理系統(tǒng)模型設計可以滿足當前企業(yè)大多數(shù)基本需求。根據(jù)目前已有的主流設計方案可以發(fā)現(xiàn),能夠滿足系統(tǒng)總體架構(gòu)的設計是基于中間渠道的主體架構(gòu)。中間渠道承擔主要的信息交換之責,在實際的數(shù)據(jù)處理過程中,主要承擔起數(shù)據(jù)交換、信息加工及數(shù)據(jù)庫基本運行的工作。由此,企業(yè)的信息技術管理人員經(jīng)過多方比較,形成了企業(yè)的主數(shù)據(jù)管理系統(tǒng)。而主數(shù)據(jù)管理系統(tǒng)也可以說是信息交流中間渠道的載體,上述辦法把信息交流與信息加工結(jié)合起來,完全凸顯中間渠道的作用,做到了信息交流主流系統(tǒng)與總數(shù)據(jù)庫相結(jié)合[4]。另外,這一方法賦予了主數(shù)據(jù)庫更大的容量與處理水平。從以上企業(yè)主數(shù)據(jù)管理系統(tǒng)的基本結(jié)構(gòu)中可以發(fā)現(xiàn),企業(yè)基本管理系統(tǒng)主要包括信息交流基本適配器、基本適配器的管控與處理、主數(shù)據(jù)的基本管理、系統(tǒng)應用的基本管理。在此基礎上,管理系統(tǒng)保證各類數(shù)據(jù)進行交換,建立適配器的運行交換環(huán)境,形成交換空間。企業(yè)主數(shù)據(jù)管理系統(tǒng)要在中間渠道交流的基礎上進行信息交換,且要符合企業(yè)主數(shù)據(jù)庫的基本要求。綜上所述,企業(yè)主數(shù)據(jù)管理系統(tǒng)最主要的是中間渠道操作平臺,其次是數(shù)據(jù)交換環(huán)境。在已有的數(shù)據(jù)交換環(huán)境中,最重要的內(nèi)容是適配器的基本運行條件,換言之,企業(yè)要構(gòu)建符合適配器運行的基本環(huán)境。在良好的環(huán)境下,主數(shù)據(jù)管理系統(tǒng)才能夠滿足輸入與輸出的良性轉(zhuǎn)換,將輸入數(shù)據(jù)按照已有的要求轉(zhuǎn)換成輸出數(shù)據(jù),提高數(shù)據(jù)處理的效率。如果數(shù)據(jù)處理處于良性運行,那么數(shù)據(jù)的監(jiān)控與管理則變得更加高效,它將為系統(tǒng)提供全方位、多角度、高質(zhì)量的管理,為系統(tǒng)的安全、穩(wěn)定運行提供保障。
從已有的數(shù)據(jù)交流方式中可以發(fā)現(xiàn),主數(shù)據(jù)管理系統(tǒng)的適配器在主數(shù)據(jù)管理系統(tǒng)結(jié)構(gòu)中起著非常關鍵的作用,可以說,大部分主數(shù)據(jù)的處理與分析需要借助主數(shù)據(jù)的適配器的合理運行。所以,要構(gòu)建良好的數(shù)據(jù)適配器工作環(huán)境,把完善適配環(huán)境當成建立主數(shù)據(jù)管理系統(tǒng)的重點工作。在企業(yè)的信息數(shù)據(jù)管理系統(tǒng)中,需要大量的主數(shù)據(jù)相互變換與轉(zhuǎn)化,轉(zhuǎn)化需要建立符合各自數(shù)據(jù)體量的適配器來滿足適配合理運行。在此背景下,通過向多種渠道借鑒學習,吸取了常見的流水線作業(yè)管理經(jīng)驗,以提高數(shù)據(jù)庫管理的效率。由于不同的數(shù)據(jù)適配器所需要轉(zhuǎn)化的數(shù)據(jù)類型和數(shù)據(jù)基本格式存在差異,因此,需要對已有的數(shù)據(jù)適配器進行一定的加工與處理,使各種數(shù)據(jù)適配器能夠較快地處理各自已有的數(shù)據(jù)。因此,可以嘗試在系統(tǒng)定義的基礎數(shù)據(jù)庫中,找到相應的基本適配器,再根據(jù)已有的需求合理加工,最終在系統(tǒng)中創(chuàng)造出符合實際情況的數(shù)據(jù)適配器[5]。這樣不僅可以保證適配器的基本工作要求,也可以使適配器更符合實際需求,提高數(shù)據(jù)處理的工作效率。
為了發(fā)揮主數(shù)據(jù)管理系統(tǒng)的功能,應該先將各個不同的關聯(lián)系統(tǒng)整合起來,充分實現(xiàn)各個不同的子系統(tǒng)與關鍵數(shù)據(jù)的相互聯(lián)系。當前,數(shù)據(jù)管理系統(tǒng)主要采用兩種不同的解決方案來實現(xiàn)既定目標:一是基于ETL 工具的方式來實現(xiàn);二是基于SOA 的基本體系架構(gòu)來實現(xiàn)。
對于第一種方式,ETL 工具的實現(xiàn)途徑常用ETL工具本身,其具有數(shù)據(jù)捕捉與數(shù)據(jù)轉(zhuǎn)化的能力,通常使用它來實現(xiàn)MDM系統(tǒng)中異構(gòu)系統(tǒng)的數(shù)據(jù)關聯(lián)、整合與排列。目前,很多相關的廠商都推出了自己的數(shù)據(jù)系統(tǒng),它們均是基于ETL 來解決數(shù)據(jù)管理的問題。當其中的一個數(shù)據(jù)系統(tǒng)發(fā)生變化時,其關聯(lián)的部位就會捕捉到相關的變化,進而把這種變化傳遞到主數(shù)據(jù)管理系統(tǒng)中去,改變主數(shù)據(jù)管理系統(tǒng)中的數(shù)值。ETL 工具會根據(jù)這種轉(zhuǎn)變清除過去的歷史記錄,從而形成新的重組數(shù)據(jù)。同時,系統(tǒng)也會將不同的數(shù)據(jù)分發(fā)給相關聯(lián)的業(yè)務系統(tǒng),由業(yè)務相關的業(yè)務系統(tǒng)進行審批。在后續(xù)的設計中,可以考慮把ETL 系統(tǒng)加入相關的流程引擎,可以提前布局流程的系統(tǒng)設計,使得不同的流程實現(xiàn)前后切換?;贓TL系統(tǒng)的設計的優(yōu)點是工作時效高,而缺點是工作選擇的途徑較為單一,且受到網(wǎng)絡影響的程度較大。
第二種方法是基于SOA 架構(gòu)的主數(shù)據(jù)管理系統(tǒng),這種方法主要采用web service來實現(xiàn)不同的系統(tǒng)互聯(lián)互通,這種系統(tǒng)處理數(shù)據(jù)的方法主要是使用數(shù)據(jù)應用和關聯(lián)適配器,通過不同類型的適配器,使得關聯(lián)數(shù)據(jù)推送消息。SOA 系統(tǒng)自帶監(jiān)控功能,可以實現(xiàn)對系統(tǒng)中的工作流引擎進行監(jiān)控,并且能夠?qū)崟r控制主數(shù)據(jù)的全過程。另外,該系統(tǒng)的基本架構(gòu)是基于J2EE的架構(gòu),系統(tǒng)的方法將更加多樣化,拓展性也比較好。當然,如果數(shù)據(jù)量較大,該系統(tǒng)的效率會降低。
當企業(yè)主數(shù)據(jù)管理系統(tǒng)完工后,工作人員需要測試系統(tǒng)的運行情況。根據(jù)已有的既定方案,企業(yè)內(nèi)部各個部門的應用系統(tǒng)都是獨立運行的,它們存儲的數(shù)據(jù)都具有唯一性,并由專門管理的人員進行管理。例如,在企業(yè)人力資源部門中,部門會派專門的人員輸入或輸出數(shù)據(jù),也包括后期數(shù)據(jù)安全管理與數(shù)據(jù)運行維護。但是,企業(yè)其他部門也存在不同的客戶關系,需要其他部門內(nèi)相應的管理人員對其進行數(shù)據(jù)梳理,這也就是所謂的“專人專職”管理模式。雖然系統(tǒng)內(nèi)管理的工作量略有增加,但管理質(zhì)量和安全性都得到了保證。在目前的數(shù)據(jù)管理信息系統(tǒng)中,相同的數(shù)據(jù)僅需在主流數(shù)據(jù)信息系統(tǒng)便可以實現(xiàn)數(shù)據(jù)處理與信息交換,可以通過中間渠道交換到其他的子數(shù)據(jù)系統(tǒng)中去,使數(shù)據(jù)交換具有非常高的靈活性。待企業(yè)的主信息管理系統(tǒng)實現(xiàn)后發(fā)現(xiàn),它大大提高了企業(yè)的數(shù)據(jù)管理效率與質(zhì)量。從量變和質(zhì)變兩個角度進行統(tǒng)計與維護發(fā)現(xiàn),在實施主數(shù)據(jù)管理系統(tǒng)后,企業(yè)能夠更好地把控已有的業(yè)務伙伴、客戶關系、供應鏈等,也能更容易地統(tǒng)計這些數(shù)據(jù)。從數(shù)據(jù)質(zhì)量的角度來看,主數(shù)據(jù)管理系統(tǒng)可以避免傳送錯誤數(shù)據(jù),對于已有的錯誤,數(shù)據(jù)會進行自糾與系統(tǒng)管理,把已有錯誤數(shù)據(jù)及時剔除,并更換為正確的數(shù)據(jù),提高了系統(tǒng)中數(shù)據(jù)庫數(shù)據(jù)的安全性與準確性。
此外,數(shù)據(jù)的數(shù)量和質(zhì)量是存在關聯(lián)的。數(shù)據(jù)的數(shù)量降低,質(zhì)量必然會下降;數(shù)據(jù)的數(shù)量提高,質(zhì)量必然也會提高。在未來,主數(shù)據(jù)管理系統(tǒng)的數(shù)據(jù)處理報錯數(shù)據(jù)將會越來越少,說明目前的主數(shù)據(jù)管理系統(tǒng)取得了非常好的成效。這使得關聯(lián)的數(shù)據(jù)在企業(yè)各個部門的子數(shù)據(jù)管理系統(tǒng)中也得到了比較充分的調(diào)用,提高了關聯(lián)數(shù)據(jù)的運行效率,降低了部門間關聯(lián)性數(shù)據(jù)的錯誤率,避免發(fā)生安全數(shù)據(jù)泄露等安全性問題。通過主數(shù)據(jù)管理系統(tǒng)的效果反饋發(fā)現(xiàn),在企業(yè)實施主數(shù)據(jù)管理系統(tǒng)后,企業(yè)在數(shù)據(jù)系統(tǒng)運行效率、數(shù)據(jù)的自動化管理、數(shù)據(jù)一體化、數(shù)據(jù)質(zhì)量與數(shù)量等方面取得了顯著提高,其數(shù)據(jù)處理的工作效率也大大提升,給企業(yè)平穩(wěn)運行與盈利帶來了極大的改善。
現(xiàn)如今,世界經(jīng)濟全球化正在進一步演變與發(fā)展,國內(nèi)的各種企業(yè)也在不斷改革與轉(zhuǎn)化。為了更好地滿足國內(nèi)企業(yè)的發(fā)展,我國需要提高企業(yè)主信息管理系統(tǒng)的應用水平,并且進一步深化企業(yè)主信息管理系統(tǒng)的程序調(diào)節(jié)、信息調(diào)用、子系統(tǒng)分配等問題。本文分析了企業(yè)主數(shù)據(jù)管理系統(tǒng)的發(fā)展現(xiàn)狀,在此基礎上,詳細劃分了企業(yè)主數(shù)據(jù)管理系統(tǒng)的基本架構(gòu),接著概述了企業(yè)主數(shù)據(jù)管理系統(tǒng)的實現(xiàn)途徑,主要包括基于ETL工具的實現(xiàn)方法與基于SOA體系架構(gòu)的實現(xiàn)方法。最后,對已有的企業(yè)主數(shù)據(jù)管理系統(tǒng)的實現(xiàn)效果進行分析并發(fā)現(xiàn),當前我國的企業(yè)主數(shù)據(jù)管理系統(tǒng)取得了顯著的進步,在各個方面均有提高。隨著企業(yè)管理信息化的進一步走深走實,在未來,我國的企業(yè)主數(shù)據(jù)管理系統(tǒng)將會更加信息化、智能化與人性化。