韓驍宇

萊斯自動(dòng)化系統(tǒng)是國(guó)產(chǎn)空管自動(dòng)化系統(tǒng)中較為成熟與完善的產(chǎn)品，目前廣泛部署在全國(guó)各個(gè)空管分局站，其中最重要的是作為三大區(qū)管中心的備用自動(dòng)化系統(tǒng)?；趯?duì)國(guó)產(chǎn)設(shè)備的支持和對(duì)運(yùn)行安全的考慮，備用系統(tǒng)常態(tài)化使用越來(lái)越頻繁。在維護(hù)與使用方面對(duì)空管管制與技術(shù)保障人員都提出了更高的要求。

本文以天津萊斯MUMEN3000自動(dòng)化系統(tǒng)為例，研究在當(dāng)前V3.2版本軟件環(huán)境下，系統(tǒng)狀態(tài)切換與顯示的機(jī)制。全面深入了解萊斯自動(dòng)化系統(tǒng)主備機(jī)切換邏輯、判斷標(biāo)準(zhǔn);系統(tǒng)運(yùn)行狀態(tài)判斷標(biāo)準(zhǔn)與切換時(shí)機(jī);各個(gè)服務(wù)器間消息傳遞機(jī)制與生效過(guò)程。并結(jié)合實(shí)際案例分析，幫助大家了解萊斯自動(dòng)化系統(tǒng)特性，為今后系統(tǒng)使用與設(shè)備維護(hù)提供支撐。

一、背景

天津使用萊斯NUMEN3000行自動(dòng)化系統(tǒng)，當(dāng)前版本為V3.2P14，是北京區(qū)管萊斯自動(dòng)化系統(tǒng)的一個(gè)TCU分區(qū)，北京區(qū)管系統(tǒng)FDP提供計(jì)劃計(jì)算及報(bào)文處理能力，本分區(qū)內(nèi)進(jìn)行雷達(dá)數(shù)據(jù)引接與處理，航跡與計(jì)劃相關(guān)計(jì)算，告警計(jì)算等功能。系統(tǒng)配置方面，主要功能服務(wù)器（如SDP、DCP等）采用雙機(jī)備份配置，擁有旁路雷達(dá)處理能力。系統(tǒng)使用三網(wǎng)結(jié)構(gòu)，由兩個(gè)運(yùn)行網(wǎng)與一個(gè)服務(wù)網(wǎng)組成。

該系統(tǒng)運(yùn)行狀態(tài)分為系統(tǒng)運(yùn)行級(jí)別、服務(wù)器運(yùn)行狀態(tài)以及各類軟件運(yùn)行情況，系統(tǒng)會(huì)根據(jù)各個(gè)模塊運(yùn)行狀態(tài)動(dòng)態(tài)調(diào)整系統(tǒng)運(yùn)行級(jí)別。并給出相應(yīng)提示，并可以通過(guò)人工操作在線進(jìn)行狀態(tài)切換。

在使用萊斯自動(dòng)化指揮期間，系統(tǒng)出現(xiàn)降級(jí)，恢復(fù)后天津分區(qū)航跡與計(jì)劃相關(guān)功能失效，北京分區(qū)該功能正常。因此對(duì)該情況進(jìn)行相關(guān)的調(diào)查與分析，主要調(diào)查主備機(jī)狀態(tài)判斷、切換邏輯，系統(tǒng)運(yùn)行狀態(tài)與顯示方面的系統(tǒng)特性。

二、調(diào)查過(guò)程

（一）降級(jí)過(guò)程調(diào)查

萊斯自動(dòng)化系統(tǒng)主備機(jī)狀態(tài)由主備機(jī)中ZLS進(jìn)程判斷，當(dāng)節(jié)點(diǎn)開機(jī)后，ZLS進(jìn)程優(yōu)先啟動(dòng)，啟動(dòng)后節(jié)點(diǎn)為初始狀態(tài)，此時(shí)節(jié)點(diǎn)通過(guò)PING進(jìn)程嘗試連接交換機(jī)，判斷網(wǎng)絡(luò)狀態(tài)。同時(shí)ZLS進(jìn)程準(zhǔn)備接收主備機(jī)心跳信息，如果收到同組服務(wù)器的主機(jī)心跳，則將自己切換為備用狀態(tài)，并發(fā)出備機(jī)心跳;若未收到主機(jī)心跳則等待3個(gè)周期（共3秒），若在此3個(gè)周期內(nèi)收到同組的主機(jī)心跳，則判斷是否為本機(jī)發(fā)送的主機(jī)心跳信息，是則將自己置為主機(jī)狀態(tài)，否則說(shuō)明此時(shí)系統(tǒng)中有主用狀態(tài)服務(wù)器，將自己置為備用狀態(tài)。主備機(jī)心跳信息發(fā)送周期為1秒。

當(dāng)3個(gè)周期后仍未收到主機(jī)心跳信息，則發(fā)送成為主機(jī)申請(qǐng)包，并繼續(xù)等待3個(gè)周期，在此期間若收到同組主機(jī)的心跳信息，則判斷是否為本機(jī)發(fā)布的心跳信息，并按之前的流程繼續(xù)判斷，若3個(gè)周期內(nèi)未收到同組主機(jī)心跳信息，則將自己置為主機(jī)。若兩臺(tái)服務(wù)器都申請(qǐng)成為主機(jī)，則優(yōu)先申請(qǐng)的服務(wù)器成為主機(jī)。

在運(yùn)行中發(fā)現(xiàn)，系統(tǒng)降級(jí)過(guò)程中，DCP11服務(wù)器在未接入網(wǎng)絡(luò)的狀態(tài)下開機(jī)后，該節(jié)點(diǎn)由于未收到主備機(jī)狀態(tài)信息以及其他節(jié)點(diǎn)的狀態(tài)信息，因此判斷自己為單主機(jī)狀態(tài)，其他節(jié)點(diǎn)均不在線。在該節(jié)點(diǎn)接入網(wǎng)絡(luò)時(shí)，同組主機(jī)正處于兩次主機(jī)心跳信息發(fā)送的間隙期，因此DCP11未收到系統(tǒng)中同組主機(jī)的心跳信息，并將全系統(tǒng)節(jié)點(diǎn)不在線信息發(fā)送至網(wǎng)絡(luò)中。造成判斷系統(tǒng)運(yùn)行狀體的進(jìn)程SMPS根據(jù)該信息判斷系統(tǒng)主要服務(wù)器失效，系統(tǒng)降級(jí)。

（二）系統(tǒng)運(yùn)行狀態(tài)與顯示不符調(diào)查

萊斯自動(dòng)化系統(tǒng)運(yùn)行等級(jí)升降級(jí)邏輯是：當(dāng)主要功能缺失時(shí)自動(dòng)降級(jí)，例如MSDP的main radar、couple、告警等服務(wù)失效時(shí)系統(tǒng)將切換至旁路雷達(dá)處理服務(wù)器BSDP;當(dāng)區(qū)管FDP服務(wù)器失效或與區(qū)管鏈路失效時(shí)系統(tǒng)將切換至本地計(jì)劃處理服務(wù)器FDP。待故障功能恢復(fù)后需手動(dòng)確認(rèn)相應(yīng)功能恢復(fù)，并手動(dòng)升級(jí)系統(tǒng)狀態(tài)。

當(dāng)系統(tǒng)判斷當(dāng)前分區(qū)內(nèi)無(wú)SDP服務(wù)器可用，但存在雷達(dá)處理功能正常的SDP服務(wù)器時(shí)，席位會(huì)顯示可用SDP服務(wù)器中SDP進(jìn)程處理的綜合航跡;負(fù)責(zé)航跡與計(jì)劃相關(guān)的TPP進(jìn)程則會(huì)等待主任席人工確認(rèn)系統(tǒng)升級(jí)后開始工作。

在運(yùn)行過(guò)程發(fā)現(xiàn)，系統(tǒng)從出現(xiàn)降級(jí)狀態(tài)直至恢復(fù)時(shí)，席位顯示系統(tǒng)主用SDP功能、本分區(qū)FDP功能能失效，但在監(jiān)控中顯示以上4臺(tái)服務(wù)器功能運(yùn)行正常，軟件進(jìn)程運(yùn)行正常;在重啟席位后，席位顯示系統(tǒng)所有恢復(fù)功能正常，但航跡無(wú)法與計(jì)劃相關(guān)。

造成這種情況的原因?yàn)?，系統(tǒng)因DCP11發(fā)布的不正常信息后判斷系統(tǒng)降級(jí)，但實(shí)際上所有服務(wù)器狀態(tài)均正常，因此當(dāng)再次全系統(tǒng)詢問(wèn)狀態(tài)時(shí)各個(gè)節(jié)點(diǎn)返回正常消息。重啟席位后，席位進(jìn)程默認(rèn)為系統(tǒng)狀態(tài)正常，同時(shí)收到所有服務(wù)功能正常的消息，因此重啟席位進(jìn)程后顯示系統(tǒng)運(yùn)行狀態(tài)正常。但TPP進(jìn)程需人確認(rèn)系統(tǒng)恢復(fù)手動(dòng)升級(jí)才開始工作，因此系統(tǒng)相關(guān)能力喪失。需要將雙機(jī)TPP進(jìn)程下線，再次觸發(fā)自動(dòng)降級(jí)過(guò)程，并手動(dòng)升級(jí)才能恢復(fù)。

為調(diào)查此類情況，可使用zltest工具模擬當(dāng)日服務(wù)器間消息傳遞過(guò)程，使用getst腳本查看系統(tǒng)運(yùn)行狀態(tài)。用以調(diào)查系統(tǒng)在狀態(tài)顯示方面的問(wèn)題。zltest工具可人工發(fā)布各類ZLS信息（如上文中0x0100、0x0200等），getst工具可直接顯示系統(tǒng)運(yùn)行狀態(tài)，通過(guò)以上兩個(gè)工具在北京新終端測(cè)試平臺(tái)上復(fù)現(xiàn)當(dāng)日情況并結(jié)合日志分析狀態(tài)顯示與變化過(guò)程，

三、 結(jié)論

經(jīng)過(guò)調(diào)查，發(fā)現(xiàn)萊斯自動(dòng)化系統(tǒng)V3.2P15、P16均存在主備機(jī)狀態(tài)判斷、切換邏輯不合理，系統(tǒng)運(yùn)行狀態(tài)與顯示狀態(tài)不一致問(wèn)題。

其中在主備機(jī)狀態(tài)方面。服務(wù)器開機(jī)后ZLS進(jìn)程在未接入網(wǎng)絡(luò)時(shí)就開始計(jì)算主備機(jī)狀態(tài)與系統(tǒng)所有節(jié)點(diǎn)狀態(tài)，而該進(jìn)程在主要雙機(jī)配置的服務(wù)器上均有配置，根據(jù)系統(tǒng)設(shè)計(jì)原理，全系統(tǒng)只有機(jī)器號(hào)最小的節(jié)點(diǎn)發(fā)布ZLS信息，因此只要出現(xiàn)ZLS進(jìn)程發(fā)布的系統(tǒng)狀態(tài)信息，所有節(jié)點(diǎn)均根據(jù)該信息做出相應(yīng)動(dòng)作。且由于各類狀態(tài)信息的發(fā)布周期不同，有一定概率出現(xiàn)保存錯(cuò)誤信息的節(jié)點(diǎn)在接入網(wǎng)絡(luò)時(shí)將異常信息發(fā)布至系統(tǒng)中，造成系統(tǒng)整體狀態(tài)異常。同時(shí)ZLS發(fā)布的系統(tǒng)狀態(tài)信息在A、B、C三網(wǎng)中均有傳輸，因此開機(jī)后無(wú)論先接入何種類型網(wǎng)絡(luò)均存在該風(fēng)險(xiǎn)。在測(cè)試過(guò)程中，多次進(jìn)行服務(wù)器開機(jī)后接入網(wǎng)絡(luò)的操作時(shí)大部分情況下節(jié)點(diǎn)會(huì)正常接入系統(tǒng)并變?yōu)閭溆脿顟B(tài)，但出現(xiàn)一次上線服務(wù)器將主用DCP服務(wù)器自動(dòng)下線，系統(tǒng)降級(jí)情況。

在系統(tǒng)系統(tǒng)狀態(tài)顯示方面，經(jīng)過(guò)對(duì)事件中各類消息的模擬，發(fā)現(xiàn)席位顯示的系統(tǒng)狀態(tài)與系統(tǒng)真實(shí)運(yùn)行狀態(tài)存在差異。且由于系統(tǒng)升級(jí)需要主任席在相應(yīng)的狀態(tài)開關(guān)處進(jìn)行操作，由于這種差異導(dǎo)致主任席無(wú)法進(jìn)行升級(jí)操作，導(dǎo)致TPP進(jìn)程雖然狀態(tài)正常但無(wú)法介入工作，相關(guān)功能失效但系統(tǒng)顯示狀態(tài)正常，對(duì)維護(hù)維修造成誤導(dǎo)。

因此，針對(duì)主備機(jī)狀態(tài)問(wèn)題，因在節(jié)點(diǎn)介入系統(tǒng)前進(jìn)行狀態(tài)計(jì)算無(wú)意義，且會(huì)生成異常狀態(tài)信息，建議調(diào)整軟件啟動(dòng)邏輯，節(jié)點(diǎn)在未聯(lián)通網(wǎng)絡(luò)，不能收到系統(tǒng)狀態(tài)時(shí)不進(jìn)行主備機(jī)狀態(tài)及系統(tǒng)狀態(tài)的計(jì)算。針對(duì)系統(tǒng)運(yùn)行狀態(tài)與顯示狀態(tài)不一致問(wèn)題，為便于技術(shù)維護(hù)人員及時(shí)準(zhǔn)確的判斷系統(tǒng)狀態(tài)，建議在監(jiān)控中顯示系統(tǒng)中各個(gè)服務(wù)器運(yùn)行狀態(tài)及系統(tǒng)運(yùn)行狀態(tài)，為運(yùn)行維護(hù)提供準(zhǔn)確信息。