江蘇長田信息科技有限公司是一家專注智慧校園建設領域的服務型企業(yè)，打造覆蓋 “教、學、考、評、管” 全場景的智慧校園一體化解決方案，構(gòu)建集智慧教學、智慧管理、智慧服務、智慧安防于一體的校園數(shù)字生態(tài)，打通校園各系統(tǒng)數(shù)據(jù)壁壘，實現(xiàn)資源共享、業(yè)務協(xié)同與數(shù)據(jù)互通。
一、測試準備階段
確認測試范圍
核心系統(tǒng)：統(tǒng)一平臺、教務、學工、一卡通、門禁、網(wǎng)絡、數(shù)據(jù)中心
自愈對象：服務進程、數(shù)據(jù)庫、網(wǎng)絡、硬件、接口、業(yè)務
準備環(huán)境與工具
搭建測試環(huán)境或在試運行環(huán)境開展
準備：監(jiān)控平臺、日志工具、壓力工具、網(wǎng)線 / PDU、終端設備
制定判定標準
自愈時間：服務≤3 分鐘，數(shù)據(jù)庫切換≤5 分鐘
數(shù)據(jù)要求：不丟失、不重復、不臟數(shù)據(jù)
業(yè)務要求：自動恢復，無需人工干預
備份數(shù)據(jù)測試前全量備份，避免影響正式業(yè)務。
二、基線檢查階段
檢查所有系統(tǒng)正常運行
監(jiān)控各項指標：CPU、內(nèi)存、連接數(shù)、服務狀態(tài)
記錄正常業(yè)務訪問結(jié)果（登錄、查詢、刷卡、考勤等）
確認監(jiān)控告警、日志可正常采集
三、故障模擬階段（按場景依次執(zhí)行）
1. 應用服務異常自愈
停止 / 殺死應用服務進程
觀察是否自動重啟、重新上線
記錄自愈時長、業(yè)務是否恢復
2. 數(shù)據(jù)庫異常自愈
主庫停機 / 斷開
觀察是否自動主從切換
檢查應用是否無感知、數(shù)據(jù)一致
3. 網(wǎng)絡異常自愈
拔插核心交換機 / 鏈路
模擬弱網(wǎng)、閃斷、丟包
檢查重連后會話保持、業(yè)務續(xù)傳
4. 硬件 / 供電異常自愈
單服務器宕機 / PDU 斷電
檢查集群負載漂移、服務不中斷
重啟后數(shù)據(jù)完整、服務自動拉起
5. 高并發(fā) / 資源耗盡自愈
壓測至 CPU / 內(nèi)存 / 連接池滿
觀察系統(tǒng)是否限流、降級、自我保護
壓力解除后是否自動恢復
6. 業(yè)務接口異常自愈
第三方接口超時 / 阻塞
檢查熔斷、重試、降級機制
不雪崩、不拖垮整體平臺
四、觀察與驗證階段
每個故障模擬后，統(tǒng)一做三件事：
看監(jiān)控
服務是否自動恢復
指標是否回到正常區(qū)間
有無持續(xù)報錯
查日志
有無崩潰、死鎖、數(shù)據(jù)異常
有無自愈動作記錄
驗業(yè)務
登錄、查詢、操作是否正常
刷卡 / 考勤 / 消費不重復、不丟單
數(shù)據(jù)前后一致
五、恢復與清理階段
停止所有故障模擬
手動恢復環(huán)境至正常狀態(tài)
檢查無殘留異常、無臟數(shù)據(jù)
記錄所有故障點、自愈結(jié)果、耗時
六、輸出報告階段
統(tǒng)計自愈成功率
列出自愈時長、是否達標
標注問題項、整改建議
形成《異常自愈能力測試報告》
極簡流程版（可直接用于 PPT）
準備環(huán)境與標準
基線檢查
分場景模擬故障（服務 / 庫 / 網(wǎng)絡 / 硬件 / 壓力）
監(jiān)控自愈過程
驗證業(yè)務與數(shù)據(jù)
恢復環(huán)境
輸出測試結(jié)論
本文章來自:江蘇長田信息科技有限公司
編輯人:任女士
聯(lián)系電話:18912980027
VX:TRENDY_001
轉(zhuǎn)發(fā)請注明