李麗

摘要：本文從時鐘授時對自動轉(zhuǎn)報系統(tǒng)產(chǎn)生的影響出發(fā)，闡明當(dāng)時鐘系統(tǒng)發(fā)生故障時的故障排查方法、應(yīng)急處理步驟以及經(jīng)驗總結(jié)。

關(guān)鍵詞：自動轉(zhuǎn)報系統(tǒng)；服務(wù)器時間；時間跳變

自動轉(zhuǎn)報系統(tǒng)是中國民航自動轉(zhuǎn)報網(wǎng)絡(luò)的網(wǎng)絡(luò)節(jié)點，承載著民航相關(guān)數(shù)據(jù)信息的傳遞和存儲工作。自動轉(zhuǎn)報系統(tǒng)采用的是UTC時間，與北京時間相差8小時，每天早上8：00自動轉(zhuǎn)報系統(tǒng)時間由23：59分自動變更為零時。2016年1月1日，值班員在巡檢中發(fā)現(xiàn)主用DMHS-H轉(zhuǎn)報系統(tǒng)服務(wù)器與IP終端時間跳變?yōu)椤?015年1月1日”。由于服務(wù)器中數(shù)據(jù)庫報文表的訪問均與時間關(guān)聯(lián)，時鐘的錯誤導(dǎo)致了報文無法存儲數(shù)據(jù)庫，值班員立即將故障現(xiàn)象報告給廠家工程師，查明了原因，并手動更改時間為“2016年1月1日”，恢復(fù)了服務(wù)器系統(tǒng)時間，報文存儲功能也隨之恢復(fù)。

一、事件起因

目前網(wǎng)絡(luò)傳輸室共有轉(zhuǎn)報系統(tǒng)三套，主用為DMHS-H96路自動轉(zhuǎn)報系統(tǒng)，該系統(tǒng)在2016年1月1日早8：00，時間跳變?yōu)椤?015年1月1日”，值班員發(fā)現(xiàn)后，立即檢查系統(tǒng)收發(fā)報文情況，確定中轉(zhuǎn)報文收發(fā)均正常，所有終端用戶報文能夠及時準(zhǔn)確進(jìn)行傳遞，業(yè)務(wù)沒有受到影響。但是有于時間發(fā)生了跳變，造成服務(wù)器內(nèi)找不到當(dāng)日的數(shù)據(jù)庫報文表，所有報文數(shù)據(jù)無法進(jìn)行存儲，值班員根據(jù)故障現(xiàn)象及情況，首先報告當(dāng)日值班領(lǐng)導(dǎo)，并迅速聯(lián)系廠家工程師，查找故障原因。

二、事件處理過程

1、檢查系統(tǒng)路中轉(zhuǎn)電報情況。由于該套系統(tǒng)為主用轉(zhuǎn)報系統(tǒng)，值班員首先檢查電報中轉(zhuǎn)情況，通過MNG工具實時查看系統(tǒng)路收發(fā)電報，返回結(jié)果如圖1所示，系統(tǒng)收發(fā)電報正常，與終端用戶聯(lián)系，確定所有用戶能夠正常收發(fā)電報，對業(yè)務(wù)沒有造成影響。于是，繼續(xù)排查故障原因。

2、檢查GPS時鐘。DMHS-H96路轉(zhuǎn)報系統(tǒng)使用的是GPS時鐘信號，服務(wù)器自動同步GPS時間，事發(fā)當(dāng)日，在巡檢過程中，值班員發(fā)現(xiàn)兩臺超級IP終端時間顯示為“2015年”，于是通過命令檢查服務(wù)器時間，檢查命令為：#date，返回結(jié)果顯示兩臺服務(wù)器時間均為“2015年”，確定系統(tǒng)時間出現(xiàn)異常，于是，迅速檢查GPS時鐘狀態(tài)，確定當(dāng)時GPS系統(tǒng)運(yùn)行正常，時間顯示為2016年，與實際時間完全相符，可以排除是GPS問題造成。將此檢查結(jié)果告知工程師，便于工程師 繼續(xù)排查故障原因。

3、檢查IP 終端告警。雖然電報業(yè)務(wù)可以正常中轉(zhuǎn)，但是由于時間錯誤，造成服務(wù)器數(shù)據(jù)庫找不到當(dāng)日的報文表，無法進(jìn)行報文存儲，只能在“快速查看報文”中查看緩存中的報文數(shù)據(jù)。告警信息如圖2所示：

4、報告故障信息。故障發(fā)生時，值班員將故障情況向當(dāng)日值班領(lǐng)導(dǎo)匯報，并迅速聯(lián)系廠家工程師，說明故障現(xiàn)象，配合工程師查找原因，調(diào)試遠(yuǎn)程撥號連接方式，以便工程師可以遠(yuǎn)程訪問該套轉(zhuǎn)報系統(tǒng)。

5、應(yīng)急處理。在配合工程師查找故障原因的同時，值班員將備用轉(zhuǎn)報系統(tǒng)檢查并測試正常，以備當(dāng)主用轉(zhuǎn)報系統(tǒng)無法中轉(zhuǎn)報文時迅速啟用備用轉(zhuǎn)報系統(tǒng)，具體內(nèi)容包括：

5.1核對DMHS-M（07）轉(zhuǎn)報系統(tǒng)資料與主用系統(tǒng)完全同步

5.2測試引接DYX系統(tǒng)路至DMHS-M（07）轉(zhuǎn)報系統(tǒng)，并測試收發(fā)報文成功

5.3檢查切換單元狀態(tài)，并確保切換單元處于全通狀態(tài)

三、處理結(jié)果

經(jīng)過檢查，最終確定造成時間跳變的原因為服務(wù)器中GPS時鐘模塊版本過低，造成無法識別正確年份。需要手動進(jìn)行調(diào)整才可以恢復(fù)，后期再將軟件版本更新，可以完全修復(fù)此漏洞，使得系統(tǒng)不會再出現(xiàn)該類問題。手動修改命令為“#date –s ‘2016/1/1 ”，執(zhí)行命令后，時鐘立即生效，服務(wù)器時間與IP 終端時間均顯示2016年，恢復(fù)正常。

在故障期間，由于數(shù)據(jù)庫無法存報，為了歷史記錄中不造成報文丟失，收報端聯(lián)系沈陽轉(zhuǎn)報室值班人員，將故障期間報文重新進(jìn)行轉(zhuǎn)發(fā)；發(fā)報端聯(lián)系終端用戶發(fā)報人員，將期間電報再次重新發(fā)送，確保了報文存儲的完整性。至此，由于時間錯誤造成的故障徹底解決，系統(tǒng)運(yùn)行正常。

四、經(jīng)驗總結(jié)

針對此次突發(fā)事件，從處置經(jīng)驗中可以找到需要提升的問題有以下幾點：

1、定期與廠家工程師溝通，了解系統(tǒng)所使用軟件版本信息，需要更新的軟件及時進(jìn)行更新，消除安全隱患。

2、認(rèn)真仔細(xì)對設(shè)備進(jìn)行巡視檢查，發(fā)現(xiàn)問題，及時上報并處置，以不影響業(yè)務(wù)為前提。

3、熟知系統(tǒng)維護(hù)及應(yīng)急處置流程，當(dāng)故障發(fā)生后可以及時有效的處理故障。

4、多分析、多判斷，在有限的時間內(nèi)將備用的預(yù)防應(yīng)急措施準(zhǔn)備好，搶在時間前面做好準(zhǔn)備工作。

參考文獻(xiàn)：

[1]DMHS-H系統(tǒng)部署手冊

[2]DMHS-H系統(tǒng)硬件手冊

[3] DMHS-H日常軟件基本維護(hù)手冊endprint