文章出處
文章列表
大家好,非常抱歉!今天10:28-10:51期間由于阿里云云盾流量清洗,以及切換IP后負載均衡的帶寬跑滿,影響了主站的正常訪問,給您造成了很大的麻煩,請您諒解!
故障的過程是這樣的:
10:28,我們收到了來自阿里云云盾的通知短信:
【阿里云】尊敬的用戶:您的 IP 遭受外部流量攻擊,已啟動免費清洗服務...
以前也收到過幾次這樣的通知短信,根據以往的經驗,這樣的云盾流量清洗不會影響網站的正常訪問。
可是今天收到短信后,突然發現主站www.cnblogs.com不能訪問了(當時我們是通過上海電信的網絡訪問的)。當時很著急,立即上云盾控制臺查看情況,攻擊流量在云盾的承受范圍內,不是流量攻擊造成的不能訪問。懷疑問題與云盾的流量清洗有關。所以,一邊聯系阿里云客服,一邊進行了DNS解析切換,將流量切換到了另外一臺SLB(阿里云負載均衡)上。
但是在切換時,我們忘記了另外一臺SLB上設置了帶寬限制。開始的時候由于DNS解析沒完全生效,沒察覺帶寬問題,等后來DNS解析逐漸生效后,由于帶寬跑滿造成主站訪問速度慢,等我們發現后才恢復正常。(這是我們在這次處理故障過程中的疏忽,我們會認真檢討,吸取教訓)
之后,原來的SLB在停止流量清洗之后,也恢復了正常。流量清洗期間的不能訪問可能是云盾清洗期間誤屏蔽了一些地區的IP,這個有待阿里云的進一步分析。
在這次故障中,我們深刻體會到在面對緊急問題時保持沉著冷靜的心態是多么重要,否則很容易在處理現有問題過程中制造出新的問題。
文章列表
全站熱搜