畢 誠

(濟南鐵路局 信息技術(shù)所，濟南 250001)

鐵路日常運輸組織工作中，掌握車流信息的準確性、完整性、實時性，決定著運輸組織精細化的程度和效率的高低。收集掌握車流情況及其變化趨勢是相關(guān)調(diào)度業(yè)務(wù)人員的核心工作；在鐵路生產(chǎn)力布局調(diào)整之后，管理結(jié)構(gòu)優(yōu)化，層次減少，調(diào)度指揮崗位管理跨度增加，工作量加大，使用傳統(tǒng)手段提高運輸組織的精確度、效率和效益，使區(qū)域內(nèi)作業(yè)組織均衡、協(xié)調(diào)，已經(jīng)力不從心。隨著鐵路信息化工作的推進，各類信息系統(tǒng)逐漸覆蓋了運輸調(diào)度指揮涉及的各個領(lǐng)域和層面。但由于各系統(tǒng)服務(wù)對象不同，系統(tǒng)間數(shù)據(jù)交互、共享不足，調(diào)度人員要面對多個遠程或本地系統(tǒng)去查詢、提取和整合所需要的車流信息，因此需要一個平臺將散布于各系統(tǒng)中的車流數(shù)據(jù)集中起來，按照調(diào)度指揮崗位的要求將信息整合、銜接和展示，為車流集中掌握及分析推算提供輔助手段。

1 系統(tǒng)分析與設(shè)計

1.1 數(shù)據(jù)源分析

區(qū)域車流數(shù)據(jù)產(chǎn)生于運輸生產(chǎn)的各個環(huán)節(jié)，按車輛位置可簡單分為在站和在途，在站車流主要來源于區(qū)域內(nèi)各站段運行的車站現(xiàn)車管理系統(tǒng)，在途車流來源于列車調(diào)度指揮系統(tǒng)和確報系統(tǒng)，區(qū)域車流數(shù)據(jù)內(nèi)容與分布見表1。

1.2 系統(tǒng)架構(gòu)設(shè)計

系統(tǒng)主要功能是實現(xiàn)外部數(shù)據(jù)源車流數(shù)據(jù)的采集、集成，數(shù)據(jù)更新、轉(zhuǎn)儲，車流數(shù)據(jù)分析展示。系統(tǒng)架構(gòu)及功能組成見圖1。

ETL（Extraction transformation Load）子系統(tǒng)負責將分布、異構(gòu)數(shù)據(jù)源中的數(shù)據(jù)進行抽取、轉(zhuǎn)換、集成，進行數(shù)據(jù)的清洗、拆分、匯總等處理，保證來自不同系統(tǒng)、不同格式數(shù)據(jù)的完整性和一致性，按業(yè)務(wù)要求加載到車流數(shù)據(jù)中心。數(shù)據(jù)中心子系統(tǒng)負責創(chuàng)建、維護、更新各類車流數(shù)據(jù)表，負責按面向主題構(gòu)建的歷史數(shù)據(jù)的生成和維護。數(shù)據(jù)發(fā)布展示子系統(tǒng)由數(shù)據(jù)查詢和多維分析功能組成，是用戶交互接口，面向鐵路局、站段調(diào)度、管理人員提供實時車流數(shù)據(jù)查詢、歷史數(shù)據(jù)分析、決策支持信息等。任務(wù)管理子系統(tǒng)提供元數(shù)據(jù)維護、數(shù)據(jù)采集、訪問接口管理、任務(wù)調(diào)度、系統(tǒng)監(jiān)控和故障處理等功能。

表1 區(qū)域車流數(shù)據(jù)內(nèi)容與分布

圖1 系統(tǒng)架構(gòu)圖

1.3 遠程數(shù)據(jù)采集

建立區(qū)域車流數(shù)據(jù)中心首先需要確定外部數(shù)據(jù)源的數(shù)據(jù)采集方案。由于車流數(shù)據(jù)中心服務(wù)器與列車調(diào)度系統(tǒng)服務(wù)器、確報系統(tǒng)服務(wù)器共同位于鐵路局調(diào)度系統(tǒng)局域網(wǎng)內(nèi)，因此確定在途車流數(shù)據(jù)采集的技術(shù)方案相對簡單。在站車流信息散布在管內(nèi)各站段數(shù)據(jù)中心，需要通過遠程網(wǎng)絡(luò)實現(xiàn)數(shù)據(jù)采集，數(shù)據(jù)采集有多個方案，不同的方案將導致軟件結(jié)構(gòu)、業(yè)務(wù)量、影響范圍、維護方式及運用效果的差異，在站數(shù)據(jù)采集方案與特點見表2。

表2 在站數(shù)據(jù)采集方案與特點

1.4 數(shù)據(jù)庫對象設(shè)計

系統(tǒng)的應(yīng)用以查詢?yōu)橹?，用戶對?shù)據(jù)無修改、刪除操作，要求響應(yīng)速度快、效率高。同時，區(qū)域車流數(shù)據(jù)中心的數(shù)據(jù)量大，更新頻度高，按照用戶需求，區(qū)域在站、在途實時數(shù)據(jù)更新間隔不得高于30 min。據(jù)此，在實時數(shù)據(jù)存儲設(shè)計中采用反規(guī)范化設(shè)計，嚴格控制表的數(shù)量，減少表間關(guān)聯(lián)，最大限度降低連接操作頻度，以適當?shù)娜哂嘣O(shè)計和空間占用來提高系統(tǒng)運行效率。實時數(shù)據(jù)中，設(shè)計靜態(tài)車流表，存儲全部在站現(xiàn)車信息，設(shè)計動態(tài)車流表，存儲全部在途現(xiàn)車信息。

2 功能實現(xiàn)技術(shù)

2.1 靜態(tài)車流數(shù)據(jù)采集

既有現(xiàn)車管理系統(tǒng)的數(shù)據(jù)庫存儲平臺均為Oracle9i以上版本，因此，利用Oracle Pro*C開發(fā)工具開發(fā)車站數(shù)據(jù)采集軟件模塊，部署于各站段現(xiàn)車數(shù)據(jù)中心，自動采集現(xiàn)車數(shù)據(jù)。該模塊與自研FTM傳輸軟件、數(shù)據(jù)中心加載模塊和監(jiān)控模塊共同構(gòu)成了系統(tǒng)的ETL子系統(tǒng)。車站數(shù)據(jù)采用全量抽取模式，類似數(shù)據(jù)復制。根據(jù)各類型車站系統(tǒng)數(shù)據(jù)結(jié)構(gòu)決定抽取字段及抽取規(guī)則，構(gòu)建運用支持系統(tǒng)的讀取控制表作為系統(tǒng)抽取策略。在數(shù)據(jù)中心端，采用全刪除加載模式，加載前刪除相應(yīng)舊數(shù)據(jù)，對新數(shù)據(jù)進行轉(zhuǎn)換和清洗后入庫，2次刪除動作間，安排歷史數(shù)據(jù)生成、轉(zhuǎn)儲作業(yè)。在車站端，將數(shù)據(jù)采集與傳輸軟件集成，將采集、清洗、打包、傳輸和管理功能整合到一個系統(tǒng)進程中，簡化結(jié)構(gòu)，利于遠程運維管理。

由于尚有部分中小站未實施現(xiàn)車系統(tǒng)，同步開發(fā)實施了集中式運用車管理系統(tǒng)，覆蓋區(qū)域內(nèi)全部有貨車出入的中小站，不具備網(wǎng)絡(luò)條件時由車務(wù)段調(diào)度代為管理，實現(xiàn)現(xiàn)車數(shù)據(jù)采集。并基于確報系統(tǒng)，列車調(diào)度指揮系統(tǒng)（TDCS）提供的部分站存車信息為系統(tǒng)提供輔助數(shù)據(jù)源，降低錄入工作量。

2.2 動態(tài)車流數(shù)據(jù)采集

利用Oracle數(shù)據(jù)庫提供的任務(wù)隊列管理器Job queue和存儲過程，實現(xiàn)基于TDCS/CTC列車調(diào)度指揮系統(tǒng)、列車調(diào)度指揮系統(tǒng)以及確報系統(tǒng)的在途車流實時采集處理。數(shù)據(jù)抽取策略設(shè)定為按時間段讀取，只讀取實際運行列車信息。動態(tài)車流實時采集與處理的關(guān)鍵是在途列車運行線與確報匹配，即貨車車輛屬性及裝載內(nèi)容與運行信息的集成。匹配綜合運用列車車次、時間戳、調(diào)度系統(tǒng)基礎(chǔ)數(shù)據(jù)、確報發(fā)報時間、內(nèi)容等多種元素。針對個別匹配失敗的情況，利用數(shù)據(jù)更新進行重復匹配，提高數(shù)據(jù)準確性。在數(shù)據(jù)中心端，同樣采用全刪除加載模式。2次刪除動作間，安排歷史數(shù)據(jù)轉(zhuǎn)儲作業(yè)。

2.3 數(shù)據(jù)中心管理

2.3.1 車流信息整合

為提高數(shù)據(jù)采集的準確度和完整性，運用Oracle Job 和存儲過程，基于調(diào)度系統(tǒng)、確報系統(tǒng)、鐵路局現(xiàn)車庫系統(tǒng)，統(tǒng)計由于現(xiàn)場作業(yè)過程不連續(xù)、不規(guī)范所導致的區(qū)域車流中的待發(fā)、待解車流數(shù)據(jù)，采用增量加載模式加載入庫。該作業(yè)與動態(tài)車流采集作業(yè)接續(xù)運行。

2.3.2 去向數(shù)據(jù)計算

建立與列車編組計劃動態(tài)監(jiān)控和實時調(diào)整系統(tǒng)數(shù)據(jù)接口，實現(xiàn)接口數(shù)據(jù)自動導入，生成車流徑路信息庫。利用數(shù)據(jù)庫觸發(fā)器、調(diào)用徑路數(shù)據(jù)計算存儲過程，在數(shù)據(jù)加載入庫時，自動計算重車去向、后續(xù)技術(shù)作業(yè)站、通過分界口等數(shù)據(jù)。實現(xiàn)線路、區(qū)間、分界口的自動劃分，為車流分析及推算提供數(shù)據(jù)基礎(chǔ)。

2.4 數(shù)據(jù)傳輸

研發(fā)了跨操作系統(tǒng)平臺、統(tǒng)一的數(shù)據(jù)傳輸中間件軟件（FTM）。采用Socket技術(shù)，設(shè)計了數(shù)據(jù)傳輸?shù)目煽啃ｒ瀰f(xié)議和斷點恢復的實現(xiàn)方法，實現(xiàn)了跨系統(tǒng)平臺（Unix、Windows、VMS）數(shù)據(jù)的可靠傳輸，采用了LZSS壓縮算法和自主開發(fā)的加密算法，實現(xiàn)了數(shù)據(jù)傳輸?shù)陌踩?，提高了?shù)據(jù)傳輸?shù)男省⒉糠謹?shù)據(jù)邏輯檢查及基于統(tǒng)一基礎(chǔ)字典的數(shù)據(jù)規(guī)范化功能納入傳輸中間件。

2.5 數(shù)據(jù)發(fā)布

數(shù)據(jù)分析發(fā)布子系統(tǒng)面向鐵路局、站段2級運輸管理和調(diào)度指揮崗位，實現(xiàn)調(diào)度各工種間，局、站2級調(diào)度間車流信息的統(tǒng)一發(fā)布。根據(jù)用戶的類別和角色分別提供不同深度、不同層次的數(shù)據(jù)展現(xiàn)。系統(tǒng)采用面向服務(wù)的系統(tǒng)架構(gòu)（SOA），將基于標準的服務(wù)整合優(yōu)化，使其重新組合和應(yīng)用。與傳統(tǒng)的緊耦合架構(gòu)相比，松耦合架構(gòu)更能適應(yīng)業(yè)務(wù)的變化，其特征對數(shù)據(jù)展示發(fā)布具有重要的指導意義。面向服務(wù)的系統(tǒng)架構(gòu)可以更多地繼承原有系統(tǒng)中的應(yīng)用模型、業(yè)務(wù)邏輯關(guān)系和數(shù)據(jù)，降低系統(tǒng)重構(gòu)的造價，提高效率。為滿足部署簡單、適應(yīng)平臺廣、訪問便捷、易于升級等設(shè)計性能目標，考慮良好的可擴展性及低廉的維護成本，在SOA架構(gòu)下，數(shù)據(jù)分析展示系統(tǒng)采用基于J2EE應(yīng)用的B/S設(shè)計模式進行構(gòu)建，如圖2，用戶通過瀏覽器對數(shù)據(jù)進行查詢。

圖2 基于SOA模式的J2EE架構(gòu)

2.6 任務(wù)管理

對數(shù)據(jù)采集子系統(tǒng)、數(shù)據(jù)中心管理子系統(tǒng)的各類應(yīng)用程序、傳輸軟件、數(shù)據(jù)庫作業(yè)、服務(wù)器的運行狀態(tài)進行自動實時監(jiān)測、報警及進程恢復等維護，實現(xiàn)系統(tǒng)運行監(jiān)控、維護自動化，減輕軟件維護及監(jiān)控工作量。負責基礎(chǔ)數(shù)據(jù)字典，接口參數(shù)表管理。

3 結(jié)束語

通過系統(tǒng)的開發(fā)應(yīng)用，建立了鐵路局車流集中管理平臺，實現(xiàn)了管內(nèi)現(xiàn)車數(shù)據(jù)的自動采集、匯總、查詢、分析，實現(xiàn)在途車、站存車按移交、管重、線路、調(diào)度臺、分界口等分類統(tǒng)計查詢。以統(tǒng)一數(shù)據(jù)源為基礎(chǔ)實現(xiàn)了推算分析結(jié)果的統(tǒng)一，實現(xiàn)了多角度分析應(yīng)用。對準確、完整地掌握車流信息，提高車流調(diào)整、計劃編制、車站作業(yè)組織的質(zhì)量和效率，優(yōu)勢明顯。作者將以此為基礎(chǔ)進行短期車流推算的探索。

[1]鐵路計劃調(diào)度管理系統(tǒng)研究報告[Z]. 北京：鐵道部信息技術(shù)中心，2009.

[2]李輝康. 鐵路局調(diào)度分析系統(tǒng)的設(shè)計與實現(xiàn)[J].鐵路計算機應(yīng)用，2008（9）.

[3]楊在申. 一種基于SOA的鐵路數(shù)據(jù)中心數(shù)據(jù)展示方案[J].鐵路計算機應(yīng)用，2008（4）.

[4]牛志敏. 鐵道部貨調(diào)系統(tǒng)Oracle數(shù)據(jù)庫的設(shè)計與實現(xiàn)[J]. 鐵路計算機應(yīng)用，2008（1）.

[5]曾長云. 鐵路局現(xiàn)車管理和貨車追蹤系統(tǒng)的設(shè)計與實現(xiàn)[J].鐵路計算機應(yīng)用，2006（9）.

[6]W.H.Inmon.數(shù)據(jù)倉庫[M]. 北京：機械工業(yè)出版社，2003，1.