如今，電子渠道的業(yè)務(wù)量已經(jīng)占到銀行業(yè)務(wù)量的80%以上，電子渠道用戶的體驗(yàn)變得比以往任何時(shí)候都更加重要。作為業(yè)務(wù)系統(tǒng)的建設(shè)者與維護(hù)者，運(yùn)維部門同樣需要從客戶的體驗(yàn)出發(fā)，實(shí)時(shí)感知用戶辦理業(yè)務(wù)的真實(shí)體驗(yàn)，及時(shí)定位和解決影響用戶體驗(yàn)的隱患和故障，以持續(xù)提升用戶滿意度，滿足行內(nèi)業(yè)務(wù)發(fā)展的要求。

面臨的運(yùn)維挑戰(zhàn)

浙江省作為全國(guó)民營(yíng)經(jīng)濟(jì)最發(fā)達(dá)的地區(qū)，金融業(yè)務(wù)的需求非常旺盛。作為浙江省內(nèi)最大的金融機(jī)構(gòu)，浙江省農(nóng)村信用社聯(lián)合社（以下簡(jiǎn)稱省聯(lián)社）負(fù)責(zé)對(duì)浙江省農(nóng)信系統(tǒng)（包括農(nóng)信聯(lián)社、農(nóng)村合作銀行、農(nóng)村商業(yè)銀行）進(jìn)行管理、指導(dǎo)、協(xié)調(diào)和服務(wù)。本行下轄81 家行社，擁有4100 多個(gè)營(yíng)業(yè)網(wǎng)點(diǎn)及5 萬(wàn)多名員工，規(guī)模大、網(wǎng)點(diǎn)多，業(yè)務(wù)穩(wěn)定性要求高，因此對(duì)運(yùn)維品質(zhì)和質(zhì)量的要求極高。

隨著省聯(lián)社業(yè)務(wù)發(fā)展及IT 管理的需要，服務(wù)器、網(wǎng)絡(luò)、中間件、業(yè)務(wù)應(yīng)用等面臨的監(jiān)控壓力也越來(lái)越大，運(yùn)維監(jiān)控開始出現(xiàn)短板：

1.業(yè)務(wù)系統(tǒng)多，缺乏統(tǒng)一的應(yīng)用性能監(jiān)控平臺(tái)，無(wú)法實(shí)時(shí)把控業(yè)務(wù)系統(tǒng)的運(yùn)行質(zhì)量；

2.故障可能的種類和原因愈發(fā)復(fù)雜，完成告警、定位、排障流程的耗時(shí)越來(lái)越長(zhǎng)；

3.對(duì)應(yīng)用監(jiān)控的指標(biāo)和維度不夠豐富，缺乏能夠反映用戶真實(shí)體驗(yàn)的監(jiān)控?cái)?shù)據(jù)。

針對(duì)以上問(wèn)題，運(yùn)維部門開始著手建設(shè)應(yīng)用性能監(jiān)控平臺(tái)，幫助快速提升運(yùn)維能力。

解決方案

1.方案選型

經(jīng)過(guò)對(duì)行業(yè)內(nèi)相關(guān)技術(shù)的廣泛調(diào)研和考察，目前主流的三種監(jiān)控技術(shù)手段為：網(wǎng)絡(luò)旁路、埋點(diǎn)和日志。經(jīng)過(guò)詳盡的對(duì)比和評(píng)估，省聯(lián)社認(rèn)為旁路式監(jiān)控對(duì)生產(chǎn)系統(tǒng)無(wú)影響，實(shí)施周期短，可快速提高科技部門的業(yè)務(wù)運(yùn)維能力，成本低，見效快。由此決定進(jìn)行網(wǎng)絡(luò)旁路式監(jiān)控的部署。

2.覆蓋范圍

采用網(wǎng)絡(luò)旁路式應(yīng)用性能監(jiān)控技術(shù)的適應(yīng)性強(qiáng)、時(shí)間短、成本低，適合多套業(yè)務(wù)系統(tǒng)的端到端全鏈路部署。所以在一期項(xiàng)目中，省聯(lián)社選取了行內(nèi)16 套重要業(yè)務(wù)系統(tǒng)進(jìn)行了全鏈路監(jiān)控，包括：核心系統(tǒng)、網(wǎng)上銀行、手機(jī)銀行、大小額支付（超級(jí)網(wǎng)銀、農(nóng)信銀）、綜合前置（渠道接入）、信用卡、電話銀行、第三方中間業(yè)務(wù)、銀行卡前置、綜合前端、國(guó)際業(yè)務(wù)、資金業(yè)務(wù)、短信平臺(tái)、信貸管理以及互聯(lián)網(wǎng)金融等系統(tǒng)。

3.系統(tǒng)主要功能

應(yīng)用性能監(jiān)控平臺(tái)作為省聯(lián)社在運(yùn)維方面的主要監(jiān)控系統(tǒng)，提供了絕大部分應(yīng)用監(jiān)控的功能實(shí)現(xiàn)：

（1）業(yè)務(wù)架構(gòu)梳理

通過(guò)分析網(wǎng)絡(luò)數(shù)據(jù)包來(lái)自動(dòng)繪制應(yīng)用訪問(wèn)關(guān)系，使省聯(lián)社實(shí)現(xiàn)了業(yè)務(wù)流程流轉(zhuǎn)關(guān)系的動(dòng)態(tài)刷新，并可在業(yè)務(wù)系統(tǒng)變更后快速梳理業(yè)務(wù)架構(gòu)。

（2）統(tǒng)計(jì)指標(biāo)計(jì)算

通過(guò)網(wǎng)絡(luò)數(shù)據(jù)包的自動(dòng)解碼、關(guān)聯(lián)，實(shí)時(shí)計(jì)算交易量、響應(yīng)率、成功率、響應(yīng)時(shí)間等應(yīng)用性能指標(biāo)，實(shí)現(xiàn)了高實(shí)時(shí)性的業(yè)務(wù)運(yùn)行狀態(tài)把控。

（3）性能展示

實(shí)現(xiàn)了對(duì)16 套重要業(yè)務(wù)系統(tǒng)的實(shí)時(shí)監(jiān)控覆蓋，并可根據(jù)需要自定義展示的指標(biāo)數(shù)據(jù)，通過(guò)數(shù)據(jù)掌握用戶的真實(shí)體驗(yàn)情況；并且可根據(jù)運(yùn)維和管理需要靈活采集不同維度的數(shù)據(jù)，將監(jiān)控平臺(tái)所展示的指標(biāo)與信息集中于當(dāng)下運(yùn)維關(guān)注點(diǎn)。

（4）實(shí)時(shí)告警

通過(guò)與行內(nèi)事件平臺(tái)的集成，通過(guò)動(dòng)態(tài)基線和固定閾值組合的模式實(shí)現(xiàn)實(shí)時(shí)預(yù)警與快速定位，第一時(shí)間發(fā)現(xiàn)業(yè)務(wù)運(yùn)行的隱患和故障，提高故障排除與系統(tǒng)恢復(fù)的處理效率。

（5）交易查詢

通過(guò)精確到逐筆交易的明細(xì)數(shù)據(jù)字段，實(shí)現(xiàn)對(duì)單筆交易的查詢、追蹤、分析、定位等操作，滿足快速查障排障的工作需要。

（6）數(shù)據(jù)輸出

通過(guò)API 接口應(yīng)用將監(jiān)控平臺(tái)的實(shí)時(shí)監(jiān)控?cái)?shù)據(jù)與監(jiān)管報(bào)送平臺(tái)對(duì)接，滿足浙江省銀監(jiān)局信息科技風(fēng)險(xiǎn)動(dòng)態(tài)監(jiān)測(cè)數(shù)據(jù)的報(bào)送要求。

（7）大屏展示

通過(guò)接入監(jiān)控平臺(tái)實(shí)時(shí)數(shù)據(jù)，模塊化自定義大屏可提供針對(duì)業(yè)務(wù)運(yùn)行、用戶體驗(yàn)、系統(tǒng)性能、交易分布等多種維度的信息展示，在重大保障、系統(tǒng)變更、壓力測(cè)試等場(chǎng)合可實(shí)時(shí)、快速掌握各系統(tǒng)的全局運(yùn)行態(tài)勢(shì)。

項(xiàng)目收益

通過(guò)此次項(xiàng)目建設(shè)，省聯(lián)社大大改善了業(yè)務(wù)系統(tǒng)的監(jiān)控粒度和實(shí)時(shí)性，促進(jìn)了運(yùn)維水平和服務(wù)質(zhì)量的極大提升，保障了業(yè)務(wù)系統(tǒng)可用性及連續(xù)性的進(jìn)一步提高。

省聯(lián)社在較短的時(shí)間完成了行內(nèi)主要業(yè)務(wù)系統(tǒng)的端到端的全鏈路監(jiān)控覆蓋，建成了一體化應(yīng)用監(jiān)控平臺(tái)，實(shí)現(xiàn)了運(yùn)維部門應(yīng)用監(jiān)控能力的極大增強(qiáng)，改善了運(yùn)維工作的效率和品質(zhì)。

新系統(tǒng)建成后，省聯(lián)社擁有了對(duì)業(yè)務(wù)系統(tǒng)中各項(xiàng)數(shù)據(jù)的采集、處理、分析能力，為后期金融科技項(xiàng)目建設(shè)提供了技術(shù)支持和數(shù)據(jù)來(lái)源；高度靈活性的運(yùn)維管理平臺(tái)能夠很好地應(yīng)對(duì)和滿足業(yè)務(wù)系統(tǒng)不斷擴(kuò)張升級(jí)帶來(lái)的運(yùn)維需求和壓力，支撐未來(lái)多年的業(yè)務(wù)系統(tǒng)發(fā)展。

總結(jié)及展望

近幾年，浙江省農(nóng)村信用社聯(lián)合社逐步建成了管控平臺(tái)、部署平臺(tái)、日志平臺(tái)、應(yīng)用性能管理四大運(yùn)維平臺(tái)。應(yīng)用性能管理平臺(tái)自上線運(yùn)營(yíng)以來(lái)，在新業(yè)務(wù)上線、業(yè)務(wù)變更、重大活動(dòng)保障、災(zāi)備演練等各方面成效顯著，已多次幫助運(yùn)維部門及時(shí)預(yù)警、及時(shí)處理業(yè)務(wù)故障；幫助業(yè)務(wù)運(yùn)維部門掌握業(yè)務(wù)系統(tǒng)的實(shí)時(shí)運(yùn)行狀況，實(shí)時(shí)監(jiān)測(cè)用戶的業(yè)務(wù)體驗(yàn)；同時(shí)，保質(zhì)保量地完成數(shù)據(jù)監(jiān)管報(bào)送要求。后期，省聯(lián)社將持續(xù)提高監(jiān)控覆蓋率，力求實(shí)現(xiàn)對(duì)行內(nèi)重要業(yè)務(wù)系統(tǒng)的端到端監(jiān)控全覆蓋，實(shí)現(xiàn)用戶業(yè)務(wù)體驗(yàn)的全流程監(jiān)測(cè)。

點(diǎn)評(píng)

隨著金融電子化的深入推進(jìn)，電子渠道的業(yè)務(wù)量大大增加，業(yè)務(wù)系統(tǒng)對(duì)客戶體驗(yàn)和滿意度的影響作用也大大提升，浙江省農(nóng)村信用社聯(lián)合社通過(guò)建設(shè)新一代應(yīng)用性能監(jiān)控平臺(tái)，實(shí)現(xiàn)用戶業(yè)務(wù)體驗(yàn)的全流程監(jiān)測(cè)，在改善運(yùn)維工作效率和品質(zhì)的同時(shí)，也增加了客戶滿意度。