我與金融科技的故事｜富國(guó)基金張誠(chéng)—固運(yùn)維基座之本，提智能分析之效

    【編者按】為深入貫徹落實(shí)黨的二十大精神，引導(dǎo)基金行業(yè)機(jī)構(gòu)踐行《證券期貨業(yè)科技發(fā)展“十四五”規(guī)劃》，共促基金行業(yè)數(shù)字化轉(zhuǎn)型，按照中國(guó)證監(jiān)會(huì)總體工作部署，于2022年11月開(kāi)展“證券期貨業(yè)數(shù)字化轉(zhuǎn)型主題宣傳月”活動(dòng)。通過(guò)開(kāi)展“證券期貨業(yè)數(shù)字化轉(zhuǎn)型主題宣傳月”活動(dòng)，搭建交流平臺(tái)，展現(xiàn)數(shù)字化轉(zhuǎn)型成果案例，激發(fā)金融科技創(chuàng)新活力，營(yíng)造金融科技長(zhǎng)效發(fā)展新生態(tài)。該篇為“證券期貨業(yè)數(shù)字化轉(zhuǎn)型主題宣傳月”《我與金融科技的故事》征文之三。

固運(yùn)維基座之本，提智能分析之效

——富國(guó)基金 張誠(chéng)

    加入富國(guó)基金八年，見(jiàn)證了運(yùn)維保障組的監(jiān)控系統(tǒng)，從最初單一的Nagios監(jiān)控，到逐漸整合Zabbix、Splunk、Prometheus、Skywalking、APM等復(fù)合技術(shù)，在系統(tǒng)層面和應(yīng)用層面的監(jiān)控越來(lái)越完善。隨之而來(lái)的則是性能和容量監(jiān)控，它是運(yùn)維的必經(jīng)之路，是向更高層發(fā)展的基礎(chǔ)。

    經(jīng)過(guò)幾年的探索研究，我們形成了以監(jiān)控為核心，數(shù)據(jù)為基礎(chǔ)，業(yè)務(wù)為導(dǎo)向的性能容量分析體系，建立了跑批類系統(tǒng)趨勢(shì)分析、波動(dòng)預(yù)測(cè)模型，業(yè)務(wù)連續(xù)性關(guān)鍵節(jié)點(diǎn)監(jiān)控和實(shí)時(shí)交易接口性能監(jiān)控為核心的匯總機(jī)制。

    總結(jié)一下性能監(jiān)控的成長(zhǎng)歷程，個(gè)人認(rèn)為一個(gè)良好的運(yùn)維性能監(jiān)控必須經(jīng)歷過(guò)如下幾點(diǎn)：

    1、系統(tǒng)的歸納整理能夠清晰的梳理出公司各類系統(tǒng)分級(jí)，從7*24業(yè)務(wù)流程圖中提煉出核心系統(tǒng)，關(guān)鍵任務(wù)節(jié)點(diǎn)。

    2、數(shù)據(jù)的長(zhǎng)期采集“一切用數(shù)據(jù)說(shuō)話”合理利用工具定時(shí)收集相關(guān)數(shù)據(jù)，如zabbix的監(jiān)控項(xiàng)作為收集器，收集跑批系統(tǒng)的記錄每日交易量、批量耗時(shí)（含明細(xì)步驟）、存儲(chǔ)空間統(tǒng)計(jì)；Splunk自定義指標(biāo)儀表盤(pán)，監(jiān)控實(shí)時(shí)交易系統(tǒng)的日均筆數(shù)、峰值筆數(shù)、單筆耗時(shí)、PV/UV；在前一步的基礎(chǔ)上，自研關(guān)鍵任務(wù)看板，每日完成情況和時(shí)間點(diǎn)，并推送相關(guān)統(tǒng)計(jì)報(bào)表。

    3、定期、多維度評(píng)估找出核心系統(tǒng)的核心指標(biāo)數(shù)據(jù)，如日平均處理量、平均處理速度、清算節(jié)點(diǎn)平均耗時(shí)、存儲(chǔ)預(yù)計(jì)消耗量、日均筆數(shù)、峰值筆數(shù)、單筆耗時(shí)、接口訪問(wèn)量；評(píng)估任務(wù)及時(shí)率和重清算風(fēng)險(xiǎn)。

    4、從統(tǒng)計(jì)中得出反饋連點(diǎn)成線，初步得出目前系統(tǒng)的性能容量狀態(tài);從慢接口促進(jìn)優(yōu)化、從高峰提供壓測(cè)基準(zhǔn)、從增長(zhǎng)率預(yù)測(cè)壓力位;從異常指標(biāo)進(jìn)行問(wèn)題分析;從平均完成時(shí)間反推業(yè)務(wù)流程的優(yōu)化。

    5、思考優(yōu)化方向當(dāng)形成標(biāo)準(zhǔn)的數(shù)據(jù)采集、分析和展現(xiàn)體系之后，可以向其他應(yīng)用不斷去復(fù)制這套方案，遵循一致的數(shù)據(jù)標(biāo)準(zhǔn)，最后數(shù)據(jù)的采集、分析、展現(xiàn)和告警標(biāo)準(zhǔn)化完成?？梢栽谶\(yùn)維的故障定位、服務(wù)優(yōu)化、架構(gòu)改進(jìn)、運(yùn)維規(guī)劃等各方面找到應(yīng)用場(chǎng)景，思考優(yōu)化方向。

    通過(guò)以上步驟，配合相關(guān)的系統(tǒng)搭建和深入使用，增加核心技術(shù)組件的深度分析能力，從更底層發(fā)現(xiàn)問(wèn)題，在更多維度的故障快速發(fā)現(xiàn)和快速處置能力；通過(guò)監(jiān)控不斷的正反饋循環(huán)，推動(dòng)研發(fā)和廠商對(duì)接口升級(jí)、遷移、優(yōu)化；提升生產(chǎn)運(yùn)行的持續(xù)監(jiān)測(cè)、高可用、雙活、快速擴(kuò)容能力；預(yù)測(cè)數(shù)據(jù)增長(zhǎng)趨勢(shì)，提前進(jìn)行性能壓測(cè)；跑批監(jiān)控、實(shí)時(shí)監(jiān)控、任務(wù)監(jiān)控繼續(xù)擴(kuò)大范圍，相得益彰形成更全面的統(tǒng)一的性能評(píng)估，最后數(shù)據(jù)的采集、分析、展現(xiàn)和告警標(biāo)準(zhǔn)化完成。