近年來(lái)，貴州省農(nóng)村信用社在信息科技投入上保持了較高的增長(zhǎng)，在基礎(chǔ)設(shè)施、核心銀行系統(tǒng)、信息管理系統(tǒng)以及渠道建設(shè)等各方面取得長(zhǎng)足的進(jìn)步。

但隨著業(yè)務(wù)規(guī)模的不斷擴(kuò)大，業(yè)務(wù)的多樣性和復(fù)雜性都在逐年增加，業(yè)務(wù)系統(tǒng)的良好運(yùn)行直接關(guān)系到前端業(yè)務(wù)的服務(wù)質(zhì)量，因此業(yè)務(wù)系統(tǒng)的穩(wěn)定性和連續(xù)性變得尤為重要。原有的運(yùn)維監(jiān)控更關(guān)注于IT 基礎(chǔ)設(shè)施是否健康，是一種離散的監(jiān)控，無(wú)法從業(yè)務(wù)的視角發(fā)現(xiàn)問(wèn)題，難以全面、準(zhǔn)確、及時(shí)地掌握業(yè)務(wù)系統(tǒng)的運(yùn)行情況。在業(yè)務(wù)出現(xiàn)問(wèn)題后，運(yùn)維人員往往只能被動(dòng)排查，故障根源定位慢、業(yè)務(wù)影響分析困難，各監(jiān)控環(huán)節(jié)彼此獨(dú)立，難以聯(lián)動(dòng)實(shí)現(xiàn)業(yè)務(wù)系統(tǒng)的自動(dòng)故障定位，更缺乏對(duì)業(yè)務(wù)系統(tǒng)整體健康狀況和運(yùn)行趨勢(shì)的把握，無(wú)法判定業(yè)務(wù)系統(tǒng)是否存在運(yùn)行瓶頸，為決策層提供數(shù)據(jù)依據(jù)。

項(xiàng)目意義

通過(guò)建設(shè)業(yè)務(wù)性能監(jiān)測(cè)平臺(tái)，從業(yè)務(wù)視角出發(fā)，將被動(dòng)接收變?yōu)橹鲃?dòng)發(fā)現(xiàn)，實(shí)現(xiàn)故障及時(shí)預(yù)警與問(wèn)題準(zhǔn)確定位，有效降低生產(chǎn)業(yè)務(wù)系統(tǒng)運(yùn)維難度，提升反應(yīng)速度與服務(wù)質(zhì)量，促進(jìn)業(yè)務(wù)的連貫性與穩(wěn)定性，進(jìn)一步提高貴州農(nóng)信社的科技運(yùn)維能力，真正實(shí)現(xiàn)省農(nóng)信業(yè)務(wù)系統(tǒng)零風(fēng)險(xiǎn)管理，為信息系統(tǒng)安全穩(wěn)定運(yùn)行奠定基礎(chǔ)。

項(xiàng)目解決方案

1.全面支持災(zāi)備、多活數(shù)據(jù)中心架構(gòu)，分布式部署，集中展現(xiàn)

通過(guò)分布式的部署方式在兩地三中心均部署網(wǎng)絡(luò)流量采集、分析、統(tǒng)計(jì)節(jié)點(diǎn)，網(wǎng)絡(luò)流量數(shù)據(jù)在本地完成解析后，將監(jiān)控?cái)?shù)據(jù)發(fā)送至統(tǒng)一的可視化節(jié)點(diǎn)進(jìn)行集中展示，統(tǒng)一管理。構(gòu)建的業(yè)務(wù)性能監(jiān)測(cè)集群全面支持貴州省農(nóng)信新數(shù)據(jù)中心建設(shè)、數(shù)據(jù)中心搬遷以及后續(xù)災(zāi)備或多活數(shù)據(jù)中心建設(shè)。

2.覆蓋傳統(tǒng)網(wǎng)絡(luò)、虛擬化、云環(huán)境的全網(wǎng)數(shù)據(jù)采集

采用領(lǐng)先的旁路監(jiān)控技術(shù)，在不改造應(yīng)用，不影響生產(chǎn)業(yè)務(wù)的前提下，實(shí)現(xiàn)全網(wǎng)業(yè)務(wù)流量采集。通過(guò)真實(shí)的過(guò)程數(shù)據(jù)，高精度、低延遲、全量地反映業(yè)務(wù)行為和過(guò)程，全面支持現(xiàn)有復(fù)雜的IT 網(wǎng)絡(luò)架構(gòu)，覆蓋傳統(tǒng)網(wǎng)絡(luò)、虛擬化、SDN 環(huán)境。同時(shí)，通過(guò)可跨越新（云、容器、微服務(wù)）、老（SOA）架構(gòu)的采集技術(shù)，能夠保持統(tǒng)一度量標(biāo)準(zhǔn)和使用習(xí)慣，為后續(xù)業(yè)務(wù)上云提供全鏈路業(yè)務(wù)性能監(jiān)控保障。

3.以業(yè)務(wù)服務(wù)為中心的端到端、全路徑業(yè)務(wù)性能監(jiān)控

基于先進(jìn)的協(xié)議解碼技術(shù)，充分利用可靠的網(wǎng)絡(luò)數(shù)據(jù)資源，建立以業(yè)務(wù)服務(wù)為核心視角的業(yè)務(wù)交付全鏈路性能監(jiān)控。能夠自動(dòng)發(fā)現(xiàn)并梳理業(yè)務(wù)路徑，通過(guò)對(duì)影響業(yè)務(wù)的關(guān)鍵性能指標(biāo)和關(guān)鍵網(wǎng)絡(luò)指標(biāo)進(jìn)行實(shí)時(shí)監(jiān)測(cè)，直觀反映系統(tǒng)故障對(duì)業(yè)務(wù)的影響并支持區(qū)分交易類型、子交易類型、交易渠道等進(jìn)行多維度指標(biāo)統(tǒng)計(jì)?，F(xiàn)有監(jiān)控范圍已涵蓋TOP20+重要業(yè)務(wù)系統(tǒng)，覆蓋端到端的應(yīng)用服務(wù)組件，實(shí)現(xiàn)了業(yè)務(wù)性能的可視化。

另外，基于全鏈路的監(jiān)控能力，通過(guò)多段關(guān)聯(lián)允許對(duì)單筆業(yè)務(wù)進(jìn)行端到端的交易追蹤，能夠反映每筆業(yè)務(wù)實(shí)際經(jīng)過(guò)的各個(gè)處理環(huán)節(jié)、各環(huán)節(jié)的時(shí)間消耗、處理結(jié)果以及每個(gè)環(huán)節(jié)的原始交易記錄，對(duì)交易處理流程進(jìn)行深層解析，找出問(wèn)題根源所在。

4.無(wú)需代碼編寫，即刻落地

以智能的業(yè)務(wù)路徑自動(dòng)發(fā)現(xiàn)和強(qiáng)大的協(xié)議解碼引擎為基礎(chǔ)，提供可視化的解碼配置，通過(guò)對(duì)采集的網(wǎng)絡(luò)數(shù)據(jù)資源進(jìn)行智能識(shí)別，快速對(duì)交易協(xié)議進(jìn)行自動(dòng)發(fā)現(xiàn)、解碼配置和解碼驗(yàn)證，支持2000 多種業(yè)務(wù)應(yīng)用協(xié)議，不需要二次開(kāi)發(fā)，提供快速部署能力。

5.場(chǎng)景化的實(shí)時(shí)告警與智能故障定位、根因分析

針對(duì)不同業(yè)務(wù)自身的關(guān)注點(diǎn)不同，預(yù)設(shè)了五大告警場(chǎng)景，分別應(yīng)對(duì)不同場(chǎng)景下的業(yè)務(wù)性能問(wèn)題。同時(shí)，通過(guò)引入人工智能算法對(duì)歷史監(jiān)控?cái)?shù)據(jù)訓(xùn)練以形成業(yè)務(wù)性能指標(biāo)基線，在業(yè)務(wù)異常時(shí)，智能產(chǎn)生告警。智能根因分析能夠針對(duì)告警事件，在5 秒內(nèi)自動(dòng)找出導(dǎo)致告警發(fā)生的維度層次和維度值，判斷觸發(fā)告警的根源組件、告警原因，一鍵生成故障成因報(bào)告，減少反復(fù)的人工查詢操作步驟，讓一線運(yùn)維在沒(méi)有系統(tǒng)知識(shí)的情況下也能直接拿到故障關(guān)鍵信息交付二線繼續(xù)排查或直接啟動(dòng)后續(xù)流程。

6.互聯(lián)實(shí)時(shí)數(shù)據(jù)引領(lǐng)科技創(chuàng)新

在滿足運(yùn)維監(jiān)控需要的基礎(chǔ)上，業(yè)務(wù)實(shí)時(shí)數(shù)據(jù)可用于“雙11”交易監(jiān)控、年終決算、銀聯(lián)駕駛艙等業(yè)務(wù)支撐場(chǎng)景，以及實(shí)時(shí)數(shù)據(jù)湖的打造、運(yùn)維大數(shù)據(jù)分析。通過(guò)與業(yè)務(wù)相結(jié)合，還可應(yīng)用于多種業(yè)務(wù)場(chǎng)景，如網(wǎng)點(diǎn)運(yùn)營(yíng)分析、實(shí)時(shí)頭寸、市場(chǎng)營(yíng)銷等，提升運(yùn)維價(jià)值，引領(lǐng)科技創(chuàng)新。

項(xiàng)目效果

目前，貴州省農(nóng)村信用社已將TOP20+個(gè)重要業(yè)務(wù)系統(tǒng)納入業(yè)務(wù)性能監(jiān)測(cè)平臺(tái)，包括：核心、企業(yè)服務(wù)總線、統(tǒng)一支付、柜面等，共覆蓋監(jiān)控節(jié)點(diǎn)80 余個(gè)。自2019 年6月業(yè)務(wù)性能監(jiān)測(cè)平臺(tái)上線以來(lái)，通過(guò)及時(shí)、準(zhǔn)確的業(yè)務(wù)性能故障告警，大大提升了一、二線運(yùn)維人員的工作效率，達(dá)到了“降低故障恢復(fù)時(shí)間，保障業(yè)務(wù)連續(xù)性”的運(yùn)維目標(biāo)。

同時(shí)，通過(guò)對(duì)關(guān)鍵業(yè)務(wù)系統(tǒng)應(yīng)用邏輯的梳理，以及構(gòu)建業(yè)務(wù)視角的監(jiān)控視圖，貴州省農(nóng)村信用社實(shí)現(xiàn)了面向業(yè)務(wù)的實(shí)時(shí)性能監(jiān)測(cè)和管理，提升了應(yīng)用運(yùn)維水平。通過(guò)智能的多維度告警和業(yè)務(wù)故障準(zhǔn)確定位，充分保障了業(yè)務(wù)連續(xù)性，并為云計(jì)算、大數(shù)據(jù)分析業(yè)務(wù)創(chuàng)新提供助力。

此外，創(chuàng)新的將業(yè)務(wù)性能指標(biāo)、網(wǎng)絡(luò)質(zhì)量指標(biāo)相結(jié)合，找出業(yè)務(wù)指標(biāo)和網(wǎng)絡(luò)指標(biāo)的相關(guān)性，從而更精準(zhǔn)地定位問(wèn)題，并首次在農(nóng)信體系實(shí)現(xiàn)跨越傳統(tǒng)網(wǎng)絡(luò)、虛擬化、SDN 環(huán)境，實(shí)現(xiàn)了混合架構(gòu)下全流量網(wǎng)絡(luò)旁路數(shù)據(jù)的采集監(jiān)控，在農(nóng)信體系信息科技建設(shè)中起到了一定的先鋒示范作用。

點(diǎn)評(píng)

金融行業(yè)對(duì)業(yè)務(wù)系統(tǒng)的安全穩(wěn)定運(yùn)行要求極高，這也給金融體系的安全運(yùn)維工作帶來(lái)了極大挑戰(zhàn)，貴州省農(nóng)村信用社通過(guò)采用業(yè)務(wù)性能監(jiān)測(cè)平臺(tái)，極大的提升了日常運(yùn)維工作效率，達(dá)到了“降低故障恢復(fù)時(shí)間，保障業(yè)務(wù)連續(xù)性”的運(yùn)維目標(biāo)。