文章出處

大家好,非常抱歉!今天10:28-10:51期間由于阿里云云盾流量清洗,以及切換IP后負載均衡的帶寬跑滿,影響了主站的正常訪問,給您造成了很大的麻煩,請您諒解!

故障的過程是這樣的:

10:28,我們收到了來自阿里云云盾的通知短信:

【阿里云】尊敬的用戶:您的 IP 遭受外部流量攻擊,已啟動免費清洗服務...

以前也收到過幾次這樣的通知短信,根據以往的經驗,這樣的云盾流量清洗不會影響網站的正常訪問。

可是今天收到短信后,突然發現主站www.cnblogs.com不能訪問了(當時我們是通過上海電信的網絡訪問的)。當時很著急,立即上云盾控制臺查看情況,攻擊流量在云盾的承受范圍內,不是流量攻擊造成的不能訪問。懷疑問題與云盾的流量清洗有關。所以,一邊聯系阿里云客服,一邊進行了DNS解析切換,將流量切換到了另外一臺SLB(阿里云負載均衡)上。

但是在切換時,我們忘記了另外一臺SLB上設置了帶寬限制。開始的時候由于DNS解析沒完全生效,沒察覺帶寬問題,等后來DNS解析逐漸生效后,由于帶寬跑滿造成主站訪問速度慢,等我們發現后才恢復正常。(這是我們在這次處理故障過程中的疏忽,我們會認真檢討,吸取教訓)

之后,原來的SLB在停止流量清洗之后,也恢復了正常。流量清洗期間的不能訪問可能是云盾清洗期間誤屏蔽了一些地區的IP,這個有待阿里云的進一步分析。

在這次故障中,我們深刻體會到在面對緊急問題時保持沉著冷靜的心態是多么重要,否則很容易在處理現有問題過程中制造出新的問題。


文章列表


不含病毒。www.avast.com
arrow
arrow
    全站熱搜
    創作者介紹
    創作者 大師兄 的頭像
    大師兄

    IT工程師數位筆記本

    大師兄 發表在 痞客邦 留言(0) 人氣()