任何時候都要對每個服務保持警惕

CrazyZard發表於2020-06-01

下午4點半左右,客服陸陸續續表示幾個賬戶無法登陸系統,反饋到技術部的時候,已經有大量的客服反應了!

通過檢視日誌資訊
要對任何服務保持警惕
查了一些資料,但是並不能解決當前的問題!因為我們用的是阿里雲的 redis 4G叢集版,所以檢視了 redis 的容量,但是隻是用了 2.3G, 程式寫入報command not allow when used memory > maxmemory
但是實際使用記憶體沒有觸達 maxmemory,無解情況下,我們升級了記憶體,但是升級並不順利(升級了好久),無奈情況下提交了工單!阿里雲告訴我們:其中一個分片記憶體使用率達到了100%導致
但是並沒有給我們提供解決時間,等待許久仍無法解決,無奈之下只能申請了一個新的例項

在任何一個生產環境中,我們要對任何服務保持警惕,保證任何情況下,每個服務出現問題的時候,需要一個永遠都用不上的 Plan B !!!

本作品採用《CC 協議》,轉載必須註明作者和本文連結

快樂就是解決一個又一個的問題!

相關文章