在銀行數(shù)字化轉(zhuǎn)型進(jìn)入深水區(qū)的當(dāng)下，保障業(yè)務(wù)的連續(xù)穩(wěn)定運營，并在出現(xiàn)異常時，確保快速定位根因，及時恢復(fù)業(yè)務(wù)運行，降低損失是IT運維業(yè)務(wù)的重點目標(biāo)。但是隨著新技術(shù)、新業(yè)務(wù)的不斷涌現(xiàn)，銀行運維系統(tǒng)繁多，運維數(shù)據(jù)量大且結(jié)構(gòu)復(fù)雜，運維數(shù)據(jù)煙囪效應(yīng)明顯，導(dǎo)致出現(xiàn)問題后，根因定位緩慢，業(yè)務(wù)穩(wěn)定性難以保證。在此背景下，為了實現(xiàn)高可用性，運維數(shù)據(jù)平臺化治理已經(jīng)成為當(dāng)務(wù)之急。華夏銀行截至2023年6月，已經(jīng)實現(xiàn)了資產(chǎn)規(guī)模超過4萬億元的目標(biāo)，在數(shù)字化轉(zhuǎn)型方面，華夏銀行緊扣“一流智慧生態(tài)銀行”的轉(zhuǎn)型目標(biāo)。2023年從七大重點工程擴容至十大工程，共涉及123項重點任務(wù)。神盾工程作為七大重點工程之一，以強化智慧運行與安全管理項目群作為目標(biāo)，提高安全運營能力。在此期間，華夏銀行與擎創(chuàng)科技分別作為甲乙方牽頭單位，共同推動《金融機構(gòu)信息系統(tǒng)運維數(shù)據(jù)治理能力成熟度評估規(guī)范》的制訂工作，并以華夏銀行信息系統(tǒng)為樣本，對銀行運維數(shù)據(jù)的治理方法和平臺搭建技術(shù)等開展了合作研究。
運維數(shù)據(jù)管理：運維數(shù)據(jù)管理不規(guī)范，運維數(shù)據(jù)無生命周期管理標(biāo)準(zhǔn)，存儲取用對數(shù)據(jù)安全造成影響現(xiàn)狀：現(xiàn)階段銀行對于運維數(shù)據(jù)沒有統(tǒng)一的管理規(guī)范，各部門數(shù)據(jù)使用權(quán)限定義模糊，數(shù)據(jù)生命周期管理混亂。問題：缺乏統(tǒng)一的運維數(shù)據(jù)管理規(guī)范，導(dǎo)致在數(shù)據(jù)取用后，存儲位置、存儲時間、何時刪除、何時歸總以及數(shù)據(jù)被用于何處等方面都沒有明確的定義。同時，運維類數(shù)據(jù)中某些信息對于安全管理具有高度敏感性，例如日志類數(shù)據(jù)可能包含大量敏感信息。運維數(shù)據(jù)生命周期管理混亂對安全性提出了極大挑戰(zhàn)。運維數(shù)據(jù)標(biāo)準(zhǔn)：運維數(shù)據(jù)標(biāo)準(zhǔn)不統(tǒng)一，數(shù)據(jù)取用鏈條長且溝通消耗時間長，導(dǎo)致取用效率低現(xiàn)狀：運維數(shù)據(jù)的含義屬性、業(yè)務(wù)規(guī)則等標(biāo)準(zhǔn)不統(tǒng)一，數(shù)據(jù)取用時溝通成本高，重復(fù)性治理工作較多。問題：由于缺乏統(tǒng)一的運維數(shù)據(jù)標(biāo)準(zhǔn)，在獲取相關(guān)數(shù)據(jù)時，很難明確描述數(shù)據(jù)的具體內(nèi)容，數(shù)據(jù)口徑無法統(tǒng)一。這導(dǎo)致了大量的人員溝通、協(xié)調(diào)以及開發(fā)工作，從而使得整個流程變得緩慢且繁瑣。數(shù)據(jù)資產(chǎn)狀況：銀行業(yè)務(wù)系統(tǒng)龐雜，運維數(shù)據(jù)孤島效應(yīng)明顯，運維數(shù)據(jù)資產(chǎn)狀況模糊。現(xiàn)狀：隨著銀行業(yè)務(wù)系統(tǒng)日趨復(fù)雜，節(jié)點調(diào)用鏈關(guān)系也隨之變得復(fù)雜，網(wǎng)狀的關(guān)聯(lián)結(jié)構(gòu)帶來了大量的復(fù)雜數(shù)據(jù)。同時，隨著銀行系統(tǒng)全面上云，分布式云計算，云原生架構(gòu)逐步開始應(yīng)用，銀行內(nèi)新老運維產(chǎn)品并行使用，且云上、云下架構(gòu)并行，致使運維系統(tǒng)復(fù)雜程度逐漸上升，運維工作的歷史包袱嚴(yán)重影響運維效率。問題：在銀行硬件設(shè)施及軟件系統(tǒng)不斷增加、升級的背景下，隨著運維數(shù)據(jù)量不斷攀升、數(shù)據(jù)種類日趨多樣化以及數(shù)據(jù)變更愈發(fā)頻繁，加之現(xiàn)階段各運維產(chǎn)品數(shù)據(jù)需要獨立處理，且數(shù)據(jù)之間未建立有效鏈接。致使數(shù)據(jù)孤島效應(yīng)明顯，運維數(shù)據(jù)的基礎(chǔ)質(zhì)量不清晰，分布狀況不明確，關(guān)聯(lián)影響模糊，大幅增加了運維工作的復(fù)雜性。為解決上述痛點，華夏銀行急需從根源，轉(zhuǎn)變運維數(shù)據(jù)的管理與使用模式，從被動的運維數(shù)據(jù)取用模式，向主動且規(guī)范的運維數(shù)據(jù)管理方式演進(jìn)，最終實現(xiàn)高效的智能運維分析。在此背景下，擎創(chuàng)科技成為華夏銀行運維數(shù)據(jù)治理平臺落地的合作伙伴。擎創(chuàng)科技依托智能大數(shù)據(jù)處理和分析能力，通過建立數(shù)據(jù)治理體系、建設(shè)數(shù)據(jù)治理平臺、提供數(shù)據(jù)應(yīng)用價值，從而提供更有效、更高效的數(shù)據(jù)管理手段和治理方法。運維數(shù)據(jù)管理與標(biāo)準(zhǔn)：為了統(tǒng)一運維數(shù)據(jù)的管理與應(yīng)用，擎創(chuàng)科技與運維數(shù)據(jù)相關(guān)方共同制定了數(shù)據(jù)治理體系，滿足數(shù)據(jù)取用需求。
對于數(shù)據(jù)平臺項目，首要任務(wù)并非直接處理數(shù)據(jù)，而是先建立健全的數(shù)據(jù)治理體系，包括數(shù)據(jù)管理規(guī)范與數(shù)據(jù)治理標(biāo)準(zhǔn)。只有在基礎(chǔ)工作完成后，才能持續(xù)推進(jìn)數(shù)據(jù)平臺建設(shè)工作。在此過程中，首先，需確保涉及的相關(guān)人員明確目標(biāo)，統(tǒng)一需求。在組織層面，應(yīng)優(yōu)先建立數(shù)據(jù)管理組織與制度。擎創(chuàng)科技協(xié)助華夏銀行成立了專門的管理組織，明確其管理職責(zé)和范圍，并制定數(shù)據(jù)管理規(guī)范與數(shù)據(jù)治理標(biāo)準(zhǔn)。隨后，通過明確的數(shù)據(jù)治理過程規(guī)范，實現(xiàn)數(shù)據(jù)質(zhì)量、數(shù)據(jù)安全、數(shù)據(jù)生命周期、數(shù)據(jù)服務(wù)的管理能力。通過統(tǒng)一數(shù)據(jù)標(biāo)準(zhǔn)化規(guī)范，實現(xiàn)數(shù)據(jù)標(biāo)準(zhǔn)的對齊，包括標(biāo)準(zhǔn)指標(biāo)體系，元、主數(shù)據(jù)模型、數(shù)據(jù)標(biāo)簽體系等。最終保證數(shù)據(jù)取用過程標(biāo)準(zhǔn)化，滿足各方數(shù)據(jù)取用需求。數(shù)據(jù)資產(chǎn)狀況：為了實現(xiàn)運維數(shù)據(jù)資產(chǎn)的全面盤點,擎創(chuàng)科技從數(shù)據(jù)源頭出發(fā),建立了完整的指標(biāo)體系將運維數(shù)據(jù)進(jìn)行關(guān)聯(lián)。數(shù)據(jù)資產(chǎn)盤點需要從數(shù)據(jù)采集源頭入手，通過統(tǒng)一采控底座實現(xiàn)數(shù)據(jù)的統(tǒng)一納管，打破數(shù)據(jù)孤島，拉通運維全域數(shù)據(jù)。原先，各個業(yè)務(wù)的運維數(shù)據(jù)源由各自分別維護，采集完成度無法監(jiān)控，采集指標(biāo)參差不齊。例如哪些設(shè)備需要監(jiān)控哪些指標(biāo)這類常規(guī)問題，無法給出全面標(biāo)準(zhǔn)的答案。為了打造運維數(shù)據(jù)平臺基座，擎創(chuàng)科技通過標(biāo)準(zhǔn)化指標(biāo)體系，將指標(biāo)是否已經(jīng)采集完成，指標(biāo)相關(guān)描述，指標(biāo)采集粒度，指標(biāo)閾值設(shè)定等進(jìn)行標(biāo)準(zhǔn)化設(shè)定，從源頭保證運維數(shù)據(jù)采集完成，且采集數(shù)據(jù)質(zhì)量高度可用。在此過程中，加入指標(biāo)映射，統(tǒng)一建立數(shù)據(jù)對象，將運維數(shù)據(jù)進(jìn)行關(guān)聯(lián)，并將原來的300多個指標(biāo)優(yōu)化至100個。實現(xiàn)運維數(shù)據(jù)資產(chǎn)盤點，為運維數(shù)據(jù)取用奠定可靠基座。標(biāo)準(zhǔn)指標(biāo)體系按照數(shù)據(jù)分類、指標(biāo)分類分層劃分如下圖所示。
基于華夏銀行數(shù)據(jù)治理痛點，同時結(jié)合擎創(chuàng)科技運維數(shù)據(jù)可視化、智能化的能力，擎創(chuàng)科技設(shè)計了一套符合金融機構(gòu)運維數(shù)據(jù)治理規(guī)范的一體化平臺方案。該方案能有效降低運維數(shù)據(jù)獲取及管理成本，提升數(shù)據(jù)共享價值。方案思路如下圖所示。
整體落地實施分為四大階段，戰(zhàn)略規(guī)劃階段、治用并舉階段、場景豐富階段、智能創(chuàng)新階段。
首先，在戰(zhàn)略規(guī)劃階段，通過與運維領(lǐng)導(dǎo)層，一線員工的深度溝通，輸出統(tǒng)一的數(shù)據(jù)治理體系。明確數(shù)據(jù)管理方，生產(chǎn)方，消費方，保證在數(shù)據(jù)管理規(guī)范與數(shù)據(jù)治理標(biāo)準(zhǔn)達(dá)成一致。由于運維數(shù)據(jù)涉及取用方橫跨價值鏈，為捋清各方應(yīng)用要求，保證數(shù)據(jù)治理體系高度可用，擎創(chuàng)科技用了3個月的時間進(jìn)行需求梳理。從運維數(shù)據(jù)管理方出發(fā)，明確數(shù)據(jù)權(quán)限控制與數(shù)據(jù)取用各方角色，隨后與數(shù)據(jù)生產(chǎn)方、消費方進(jìn)行多方訪談，明確數(shù)據(jù)生命周期管理需求（包括生產(chǎn)，存儲，解析，消費，銷毀等）、數(shù)據(jù)等級、數(shù)據(jù)口徑標(biāo)準(zhǔn)、存儲周期等細(xì)節(jié)。最初版本輸出了近20萬字的數(shù)據(jù)治理體系。最后經(jīng)過多方調(diào)研，精簡至幾萬字。其次，在治用并舉階段，以點破面，從結(jié)構(gòu)化數(shù)據(jù)入手，首先形成示范效應(yīng)，再通過治用并舉，拓展場景。在華夏銀行案例中，擎創(chuàng)科技通過調(diào)研，最終決定以人行運維數(shù)據(jù)上報這一緊急應(yīng)用場景做為抓手，推進(jìn)落地。在這一場景中，大量運維數(shù)據(jù)需要在90秒內(nèi)進(jìn)行上傳。當(dāng)時銀行在此面臨兩大問題，首先，數(shù)據(jù)源多、業(yè)務(wù)邏輯和處理流程復(fù)雜，導(dǎo)致海量數(shù)據(jù)處理過程復(fù)雜，處理效率較低。其次，算力不足導(dǎo)致上傳無法滿足時延要求。在此背景下，擎創(chuàng)科技決定先將數(shù)據(jù)治理一體化平臺結(jié)構(gòu)搭建起來，滿足人行數(shù)據(jù)上報時間窗口標(biāo)準(zhǔn)。在組織內(nèi)部做出效果。隨后，進(jìn)行治用并舉，即保證已治理場景穩(wěn)定應(yīng)用的同時，從業(yè)務(wù)數(shù)據(jù)，性能數(shù)據(jù)入手，逐漸加入新的數(shù)據(jù)應(yīng)用場景，快速提供較為典型的，或者緊急應(yīng)用的場景，如交易量數(shù)據(jù)，成功率，響應(yīng)時間，與銀聯(lián)或支付寶等平臺結(jié)算等應(yīng)用場景。未來，運維數(shù)據(jù)平臺將在豐富場景的同時，引入算法，實現(xiàn)智能運維。通過逐步接入半結(jié)構(gòu)化數(shù)據(jù)以及非結(jié)構(gòu)化數(shù)據(jù)，運維數(shù)據(jù)平臺將進(jìn)一步豐富應(yīng)用場景。如接入流程管理數(shù)據(jù)、告警平臺數(shù)據(jù)、自動化執(zhí)行數(shù)據(jù)等。同時，進(jìn)行智能化探索，引入人工智能進(jìn)行運維數(shù)據(jù)分析，比如進(jìn)行數(shù)據(jù)自動打標(biāo)，分辨數(shù)據(jù)表征，如周期性、峰值等。在疫情期間，該項目用時近一年完成，目前仍在下一階段建設(shè)中。現(xiàn)階段，數(shù)據(jù)標(biāo)準(zhǔn)化中心實現(xiàn)了標(biāo)準(zhǔn)元數(shù)據(jù)、主數(shù)據(jù)、數(shù)據(jù)源、指標(biāo)體系、標(biāo)簽體系、指標(biāo)中心、指標(biāo)映射等核心標(biāo)準(zhǔn)化能力。其中指標(biāo)體系從原來的300個縮減至100個，剔除了大量類似、冗余的指標(biāo)，數(shù)據(jù)的標(biāo)準(zhǔn)化大幅提高了數(shù)據(jù)開發(fā)效率。
同時，該平臺的數(shù)據(jù)處理中臺具備高效編排復(fù)雜解析任務(wù)的處理能力，將數(shù)據(jù)服務(wù)開發(fā)流程從天級縮短至小時級。處理能力特性包括：流批一體、在線任務(wù)編排、在線任務(wù)調(diào)試、可視化管道任務(wù)編排等。
在數(shù)據(jù)應(yīng)用方面，為方便一線運維人員的數(shù)據(jù)取用，增加使用效率，數(shù)據(jù)應(yīng)用中心提供了大量開箱可用的數(shù)據(jù)處理算子，實現(xiàn)了數(shù)據(jù)服務(wù)場景的管理，數(shù)據(jù)服務(wù)場景整體上可以歸納為數(shù)據(jù)治理、運維分析、運維決策三類場景。提供了靈活且自助式的應(yīng)用場景定制能力。
在落地過程中，擎創(chuàng)科技總結(jié)了該運維數(shù)據(jù)平臺的關(guān)鍵成功要素。即從數(shù)據(jù)治理制度規(guī)范入手，以統(tǒng)一數(shù)據(jù)標(biāo)準(zhǔn)為基石，結(jié)合客戶需求，以點破面，形成示范效應(yīng)，最后橫向拓展場景，縱向深挖智能運維能力，實現(xiàn)智能運維。
第一，制度先行：運維數(shù)據(jù)治理成功的前提是要有管理規(guī)范，使運維數(shù)據(jù)在采集，儲存，分析，管理，應(yīng)用過程中有規(guī)則可依。將治理的理念貫穿于整個平臺和數(shù)據(jù)的全生命周期中，形成一套完整的管理規(guī)范。第二，標(biāo)準(zhǔn)統(tǒng)一：數(shù)據(jù)標(biāo)準(zhǔn)統(tǒng)一是治理成功的基礎(chǔ)。數(shù)據(jù)對象和指標(biāo)的標(biāo)準(zhǔn)化將直接影響最終的數(shù)據(jù)應(yīng)用、數(shù)據(jù)洞察效果。數(shù)據(jù)標(biāo)準(zhǔn)不統(tǒng)一的運維數(shù)據(jù)平臺，不僅無法達(dá)到降本增效的目標(biāo)，還會影響智能運維平臺的最終效果，影響系統(tǒng)平穩(wěn)運營。第三，以點破面：實施階段，需要結(jié)合客戶需求，以緊急且重要的使用場景為突破點，首先搭建運維數(shù)據(jù)平臺框架，推廣使用效果，讓相關(guān)方了解使用效果，為后續(xù)配合工作搭建基礎(chǔ)。第四，治用并舉：運維數(shù)據(jù)平臺的落地過程中，需要治用并舉。即按照場景優(yōu)先級加入運維數(shù)據(jù)平臺，新場景開發(fā)與已開發(fā)場景使用并行。在試點場景落地后，根據(jù)數(shù)據(jù)的重要程度、應(yīng)用頻率及數(shù)據(jù)價值的高低，對運維數(shù)據(jù)應(yīng)用場景的重要性以及緊急性進(jìn)行排序。按照場景優(yōu)先等級進(jìn)行逐個落地推廣。
京公網(wǎng)安備 11010802036102號北京金支點技術(shù)服務(wù)有限公司保留所有權(quán)利 | Copyright ? 2005-2025 Beijing Golden Point Outsourcing Service Co., Ltd. All Rights Reserved.