作者:康鎮、殷閣朕 時間:2024年2月27日
春節是中華民族最重要的傳統節日,年年春意,歲歲暖心,人們回歸故里,回歸家庭,在與親友團圓拜賀中獲得情感滋養,籌劃未來。隨著城市數字生態迅猛發展,游子歸家,親人團聚,朋友相會,表達親情,暢敘友情,抒發鄉情等年禮節俗在“云上”解鎖了全新表達,“云過年”也成了見證中國經濟奇跡和家國文化與時俱進的最好窗口。
政務服務不間斷,云上春節更精彩
新年煙火氣,最撫凡人心。無論是人頭攢動的街市、歡聲笑語的人群,還是燈火璀璨的夜晚,豐富多彩的市民生活深度 “云化”,音視頻、社交、高速、文旅、物流、汽車、教育等行業的云上業務流量高位疊加,加之流量洪峰各有不同,給城市云服務的穩定性帶來不確定風險和巨大的挑戰。
春節對于社會安定和諧有著極為重要的意義,城市政務云業務承載了春節期間關乎城市民生的公共事業,任何一次業務中斷與故障等質量問題,都會極大影響市民的節日體驗和政府的公信力。因此,確保城市“云上春節”的穩定性,為政務客戶創造“確定性”的服務質量結果,是華為政務云SRE義不容辭的責任與追求。
保障服務三部曲,運行穩定零事故
為做好甲辰年春節期間城市云平臺保障服務,政務云SRE從11月起提前100天進入“作戰狀態”,通過華為云確定性的運維體系及解決方案,將春節云上業務的不確定性變成SLA的“確定性”,實現全棧可觀測性、故障快速恢復、管控變更風險、韌性評估優化,依托一體化的運營管理平臺,聯動質量、技術、研發、合規等專家組建春節保障團隊,針對政務業務特點沉淀出一套重大保障方案,通過“事前強部署、事中嚴管控、事后重服務”的“保障三部曲”為政務客戶云上業務保駕護航。
事前“強部署”:墨菲定律指出,“凡是可能出錯的事有很大概率會出錯”,這提示我們,任何一個事件,只要具有大于零的發生概率,就應采取預防及化解措施,防止和降低事故發生及影響。因此,政務云保障團隊提前梳理全國基地重點業務,通過用云分析技術手段進行架構分析優化、安全評估、可用性檢查、容量分析和資源監控等,評估云平臺運行穩定性,識別風險和優化資源,確保系統運行狀態最佳。對全網深度巡檢,排查設施工具和服務的風險隱患,通過重點攻關、專項優化、加固保障、風險整改等措施進行風險清零消減。同時,因“地”制宜,根據各基地氣象及業務特點,制定本基地應急預案和故障恢復方案,提前部署演練,降低故障發生概率和影響。
事中“嚴管控”:春節期間現網業務復雜性高、難以預測和掌控,極易出現突發質量事件,若無快速識別和應對、恢復和化解的能力,小則影響用戶體驗,大則可能造成經濟損失甚至產生社會負向輿論。古語云,“安而不忘危,存而不忘亡,治而不忘亂”,在保障過程中既要高度警惕“黑天鵝”事件,也要防范“灰犀牛”事件;既要做好防范風險的先手,也要有管控和化解風險的應對過程。在春節重保實施期間,依托華為云SRE全面協同的重保體系,近千名駐場運維工程師7*24小時現場值守,全時監控,不間斷巡檢。西安、廊坊、深圳三大運維中心超過1000名SRE專家遠程協同作戰,全天候響應待命,一旦出現告警,做到能力團隊快速響應、告警問題快速定位分析、應急預案快速實施、客戶業務快速恢復。同時,通過變更管控、權限管控和網絡封閉等措施,減少變更和其他操作可能觸發的風險。保障報告每日推送,事件信息及時互通,聯動多方資源時刻準備打好化險為夷、轉危為安的遭遇戰;始終敬畏業務,敬畏現網,實現“零重大問題、零重大事故、零投訴”的保障目標。
事后“重服務”:“居安思危,思則有備,有備無患”,成功保障的背后,就是要靠不斷總結提高“本領”,提高應對風險、迎接挑戰、化險為夷的保障能力。因此,在春節重保完成后,政務云保障團隊會復盤保障亮點及問題,將優秀作戰實踐固化為經驗庫和保障作戰手冊,同時與政務客戶分享華為云保障經驗及建議,為下一次重大保障沉淀“教科書”,同類“風險”可以直接“抄答案”,提升整體保障能力。
專業服務開火力,數字生態云護航
回首2023年,華為政務云SRE在確定性運維理念的指引下,已為全國超過160座城市提供超過300次運維保障服務,無論是重大節日還是突發事件,城市云上業務平穩運行的背后,都有著華為云運維工程師在現場、遠程、線下、線上日以繼夜保駕護航的身影,“以客戶為中心”,成就政務客戶極致用云體驗,助力政務業務價值穩步增長。
甲辰龍年火力全開,城市云上經濟全面復蘇,推廣大促、重要節日、上線開服和云展會等各類城市活動全面綻放,業務穩定可靠和安全的運行,為受眾提供優質的體驗,是政府社會形象的窗口和業務價值的基礎。為了更好的服務政務客戶,政務云SRE將多年來領先行業的運維技術能力和實踐經驗外溢,沉淀出覆蓋政務客戶全周期運維專業服務,為政務云業務創造“確定性”價值。 在新的一年里,政務云SRE將時刻保持“歸零”心態,拼搏奮斗、銳意進取,以穩定可靠、資源高效、安全可信、業務敏捷為目標,守護數字城市運行每分每秒,助力數字政府變革每時每刻,共筑數字中國美好未來,讓運維成為智能世界變革的加速器!
確定性運維解決方案