四川省農村信用社聯合社（以下簡稱“四川農信”）誕生于1951年，緊盯打造“農村金融主力軍、地方金融主力軍、普惠金融主力軍”目標愿景，全面推進合規銀行、智慧銀行、主力軍銀行建設。至2021年12月底，四川農信有5131個營業網點，近4萬名從業人員，資產規模達1.8萬億元，各項存款1.5萬億元，各項貸款8775億元，資產規模、存款規模位居全省同業第一位、全國農信系統第七位。

作為全國排名前列的省級農信，四川農信很早就意識到信息化支撐的重要性，并建設了眾多自動化運維工具。

然而隨著業務的高歌猛進，IT規模成倍數增長。原有運維工具分散帶來的問題日益凸顯，部分運維能力不足，限制了運維管理工作效率的進一步提升，難以滿足新業務環境運維需求。另外運維人員對于運維場景的創新想法，也缺乏好的手段和技術支撐而較難落地，運維自主性難以體現。

如何進行多數據中心統一運維建設？如何整合原有零散工具進行體系化發展建設？如何釋放技術人員創新活力？如何滿足個性化定制與自主可控要求？等等問題擺在了四川農信運維部門面前。

改變，勢在必行。

經過長時間的交流與研判，四川農信最終選擇與嘉為藍鯨攜手，通過三個階段進行自動化運維及運維開發平臺建設，實現從平臺引入、到工具整合、再到自動化運維一體化集成的目標。

01. 納管整合，構建一體化運維

藍鯨平臺是PaaS化技術架構，可以提供基礎平臺運維原子模塊能力，四川農信可以基于平臺構建運維工具，并且將零散的工具通過藍鯨實現整合，逐步實現工具架構的演變。

1）CMDB：自動采集，支持消費

作為自動化運維的基石，CMDB的重要性不言而喻。以往四川農信基于Remedy進行配置管理，功能有限。項目過程中，嘉為幫助四川農信重新梳理CMDB數據，建設了可供消費的配置管理數據庫。

貫穿應用運維及基礎架構，已納管實例近2萬，開發數十個自動發現和自動采集腳本實現信息的自動化采集。同時，完成近20個應用系統的應用拓撲可視化配置，可以從業務視角協助進行故障定位和影響分析，實現應用拓撲、故障影響分析的CMDB數據信息消費。

2）ITSM：靈活易用，體驗提升

四川農信原有使用Remedy進行工單管理，然而使用成本高、體驗亦不好。本次項目，啟用嘉為藍鯨IT服務管理中心，實現通用服務請求流程遷移，并且搭配使用智能客服，服務體驗顯著提升。

3）監控告警：集中管理，統一閉環

四川農信沿用過往建設的監控能力，結合嘉為藍鯨監控中心和告警中心，通過平臺提供的API、插件等方式接入數據，實現告警事件全生命周期的統一閉環管理。

同時，可以聯動CMDB拓撲豐富告警信息，輔助根因定位，也支持移動端通知、自愈審批、H5界面集成等便捷功能。

4）自動化作業：靈活編排，效率提升

基于作業平臺和運維腳本編排，四川農信實現運維自動化作業。以往缺失的工具如自動化發布等，也可以基于平臺實現。

以某系統發布為例，以往需要登錄幾十臺服務器人工操作，耗時50分鐘；目前實現一鍵發布，耗時僅需10分鐘，運維工作效率提升5倍！

02. 自主開發，支持智慧創新落地

藍鯨平臺在四川農信內部的定位，除了是運維工作平臺，更是運維開發平臺。有了一體化運維工具輔助，在提高了運維效率之外，也讓運維人員有更多寶貴的時間投入到更具創新的實踐中去。

藍鯨PaaS提供的運行環境托管、前后臺開發框架、低代碼平臺等，有效支撐了四川農信創新想法的落地。目前，四川農信已經基于平臺獨立自主研發了調用鏈分析、批處理監控、通用查詢、備份恢復驗證、故障進度處理等等運維場景，業務支撐愈加游刃有余。

1）調用鏈分析

通過應用墻大屏總覽各應用系統運行情況，通過點擊圖標可以跳轉對應鏈路監控頁面，查看鏈路交易情況。

2）批處理監控

針對批量作業任務，集中監控作業狀態、耗時情況等，點擊單個任務可查看任務內的所有作業執行狀態。

3）通用查詢

將常用后臺數據庫查詢界面化，供服務臺和運維人員使用。目前日均減少核心系統運維人員查詢工作時間2小時。

4）備份恢復驗證

將數據庫備份數據恢復到驗證環境，驗證數據備份是否正常，保證備份數據的完整性和可用性。目前已經實現多個數據庫、多個業務系統的備份自動恢復。

5）故障進度處理

集中展現故障處理進度情況，能及時發現異常處理及時干預，提升故障處理效率。

03. 數據說話，初探智能化運維

做好基于大數據計算的智能運維需要幾步？四川農信從日志數據著手開始探索，給出了實踐答案。

• 建設好CMDB、流程、監控告警、自動化等基礎自動化運維工具，逐步累積運維數據。
• 通過藍鯨計算平臺和日志平臺，進行基于大數據計算的日志分析。
• 聯動平臺其他功能SaaS，進行場景應用。

1）日志平臺：快速查詢，聯動告警

四川農信過往日志分散，查詢效率低；另外無日志告警，無法及時發現問題。

通過藍鯨日志平臺統一收集各業務系統日志，能夠以業務系統為維度集中查詢系統交易日志，輔助分析故障，快速定位問題原因。同時聯動監控平臺，設置日志關鍵字監控，一旦出現異常即可觸發告警。

2）計算平臺：異構存儲，可視建模

藍鯨計算平臺，彌補了過往不同數據源無法關聯、數據開發門檻高的弊端，兼容多種異構數據源采集存儲，提供一站式、低門檻的數據開發服務，和全流程、可視化的數據建模，提升數據開發效率。

經過不斷論證調試，四川農信也實踐出了多個場景的智能運維應用。

例如通過日志數據計算交易量、耗時、成功率、響應率存儲到數據庫，聯動四川農信自主研發的調用鏈分析SaaS讀取數據進行展示，能直觀看到各系統應用的鏈路交易情況，實現對業務交易健康狀態的實時監控。

打破煙囪模式，完善運維工具，集成一體化運維只是第一階段的目標。未來，四川農信將基于前期內容進行功能增強和功能擴展，落實運維數據規范化、運維工具流程化、運維工具一體化目標，實現三地四中心五節點的多網域環境的統一運維，優化和深化各模塊和場景，持續探索大數據應用，為主力軍銀行的建設貢獻智慧運維力量！