作者:康鎮(zhèn)、殷閣朕 時間:2024年2月27日
春節(jié)是中華民族最重要的傳統(tǒng)節(jié)日,年年春意,歲歲暖心,人們回歸故里,回歸家庭,在與親友團(tuán)圓拜賀中獲得情感滋養(yǎng),籌劃未來。隨著城市數(shù)字生態(tài)迅猛發(fā)展,游子歸家,親人團(tuán)聚,朋友相會,表達(dá)親情,暢敘友情,抒發(fā)鄉(xiāng)情等年禮節(jié)俗在“云上”解鎖了全新表達(dá),“云過年”也成了見證中國經(jīng)濟(jì)奇跡和家國文化與時俱進(jìn)的最好窗口。
政務(wù)服務(wù)不間斷,云上春節(jié)更精彩
新年煙火氣,最撫凡人心。無論是人頭攢動的街市、歡聲笑語的人群,還是燈火璀璨的夜晚,豐富多彩的市民生活深度 “云化”,音視頻、社交、高速、文旅、物流、汽車、教育等行業(yè)的云上業(yè)務(wù)流量高位疊加,加之流量洪峰各有不同,給城市云服務(wù)的穩(wěn)定性帶來不確定風(fēng)險和巨大的挑戰(zhàn)。
春節(jié)對于社會安定和諧有著極為重要的意義,城市政務(wù)云業(yè)務(wù)承載了春節(jié)期間關(guān)乎城市民生的公共事業(yè),任何一次業(yè)務(wù)中斷與故障等質(zhì)量問題,都會極大影響市民的節(jié)日體驗和政府的公信力。因此,確保城市“云上春節(jié)”的穩(wěn)定性,為政務(wù)客戶創(chuàng)造“確定性”的服務(wù)質(zhì)量結(jié)果,是華為政務(wù)云SRE義不容辭的責(zé)任與追求。
保障服務(wù)三部曲,運(yùn)行穩(wěn)定零事故
為做好甲辰年春節(jié)期間城市云平臺保障服務(wù),政務(wù)云SRE從11月起提前100天進(jìn)入“作戰(zhàn)狀態(tài)”,通過華為云確定性的運(yùn)維體系及解決方案,將春節(jié)云上業(yè)務(wù)的不確定性變成SLA的“確定性”,實現(xiàn)全棧可觀測性、故障快速恢復(fù)、管控變更風(fēng)險、韌性評估優(yōu)化,依托一體化的運(yùn)營管理平臺,聯(lián)動質(zhì)量、技術(shù)、研發(fā)、合規(guī)等專家組建春節(jié)保障團(tuán)隊,針對政務(wù)業(yè)務(wù)特點(diǎn)沉淀出一套重大保障方案,通過“事前強(qiáng)部署、事中嚴(yán)管控、事后重服務(wù)”的“保障三部曲”為政務(wù)客戶云上業(yè)務(wù)保駕護(hù)航。
事前“強(qiáng)部署”:墨菲定律指出,“凡是可能出錯的事有很大概率會出錯”,這提示我們,任何一個事件,只要具有大于零的發(fā)生概率,就應(yīng)采取預(yù)防及化解措施,防止和降低事故發(fā)生及影響。因此,政務(wù)云保障團(tuán)隊提前梳理全國基地重點(diǎn)業(yè)務(wù),通過用云分析技術(shù)手段進(jìn)行架構(gòu)分析優(yōu)化、安全評估、可用性檢查、容量分析和資源監(jiān)控等,評估云平臺運(yùn)行穩(wěn)定性,識別風(fēng)險和優(yōu)化資源,確保系統(tǒng)運(yùn)行狀態(tài)最佳。對全網(wǎng)深度巡檢,排查設(shè)施工具和服務(wù)的風(fēng)險隱患,通過重點(diǎn)攻關(guān)、專項優(yōu)化、加固保障、風(fēng)險整改等措施進(jìn)行風(fēng)險清零消減。同時,因“地”制宜,根據(jù)各基地氣象及業(yè)務(wù)特點(diǎn),制定本基地應(yīng)急預(yù)案和故障恢復(fù)方案,提前部署演練,降低故障發(fā)生概率和影響。
事中“嚴(yán)管控”:春節(jié)期間現(xiàn)網(wǎng)業(yè)務(wù)復(fù)雜性高、難以預(yù)測和掌控,極易出現(xiàn)突發(fā)質(zhì)量事件,若無快速識別和應(yīng)對、恢復(fù)和化解的能力,小則影響用戶體驗,大則可能造成經(jīng)濟(jì)損失甚至產(chǎn)生社會負(fù)向輿論。古語云,“安而不忘危,存而不忘亡,治而不忘亂”,在保障過程中既要高度警惕“黑天鵝”事件,也要防范“灰犀牛”事件;既要做好防范風(fēng)險的先手,也要有管控和化解風(fēng)險的應(yīng)對過程。在春節(jié)重保實施期間,依托華為云SRE全面協(xié)同的重保體系,近千名駐場運(yùn)維工程師7*24小時現(xiàn)場值守,全時監(jiān)控,不間斷巡檢。西安、廊坊、深圳三大運(yùn)維中心超過1000名SRE專家遠(yuǎn)程協(xié)同作戰(zhàn),全天候響應(yīng)待命,一旦出現(xiàn)告警,做到能力團(tuán)隊快速響應(yīng)、告警問題快速定位分析、應(yīng)急預(yù)案快速實施、客戶業(yè)務(wù)快速恢復(fù)。同時,通過變更管控、權(quán)限管控和網(wǎng)絡(luò)封閉等措施,減少變更和其他操作可能觸發(fā)的風(fēng)險。保障報告每日推送,事件信息及時互通,聯(lián)動多方資源時刻準(zhǔn)備打好化險為夷、轉(zhuǎn)危為安的遭遇戰(zhàn);始終敬畏業(yè)務(wù),敬畏現(xiàn)網(wǎng),實現(xiàn)“零重大問題、零重大事故、零投訴”的保障目標(biāo)。
事后“重服務(wù)”:“居安思危,思則有備,有備無患”,成功保障的背后,就是要靠不斷總結(jié)提高“本領(lǐng)”,提高應(yīng)對風(fēng)險、迎接挑戰(zhàn)、化險為夷的保障能力。因此,在春節(jié)重保完成后,政務(wù)云保障團(tuán)隊會復(fù)盤保障亮點(diǎn)及問題,將優(yōu)秀作戰(zhàn)實踐固化為經(jīng)驗庫和保障作戰(zhàn)手冊,同時與政務(wù)客戶分享華為云保障經(jīng)驗及建議,為下一次重大保障沉淀“教科書”,同類“風(fēng)險”可以直接“抄答案”,提升整體保障能力。
專業(yè)服務(wù)開火力,數(shù)字生態(tài)云護(hù)航
回首2023年,華為政務(wù)云SRE在確定性運(yùn)維理念的指引下,已為全國超過160座城市提供超過300次運(yùn)維保障服務(wù),無論是重大節(jié)日還是突發(fā)事件,城市云上業(yè)務(wù)平穩(wěn)運(yùn)行的背后,都有著華為云運(yùn)維工程師在現(xiàn)場、遠(yuǎn)程、線下、線上日以繼夜保駕護(hù)航的身影,“以客戶為中心”,成就政務(wù)客戶極致用云體驗,助力政務(wù)業(yè)務(wù)價值穩(wěn)步增長。
甲辰龍年火力全開,城市云上經(jīng)濟(jì)全面復(fù)蘇,推廣大促、重要節(jié)日、上線開服和云展會等各類城市活動全面綻放,業(yè)務(wù)穩(wěn)定可靠和安全的運(yùn)行,為受眾提供優(yōu)質(zhì)的體驗,是政府社會形象的窗口和業(yè)務(wù)價值的基礎(chǔ)。為了更好的服務(wù)政務(wù)客戶,政務(wù)云SRE將多年來領(lǐng)先行業(yè)的運(yùn)維技術(shù)能力和實踐經(jīng)驗外溢,沉淀出覆蓋政務(wù)客戶全周期運(yùn)維專業(yè)服務(wù),為政務(wù)云業(yè)務(wù)創(chuàng)造“確定性”價值。 在新的一年里,政務(wù)云SRE將時刻保持“歸零”心態(tài),拼搏奮斗、銳意進(jìn)取,以穩(wěn)定可靠、資源高效、安全可信、業(yè)務(wù)敏捷為目標(biāo),守護(hù)數(shù)字城市運(yùn)行每分每秒,助力數(shù)字政府變革每時每刻,共筑數(shù)字中國美好未來,讓運(yùn)維成為智能世界變革的加速器!
確定性運(yùn)維解決方案