快取過程存在的三大問題及解決方案
Redis
經常用於系統中的快取,可以極大地提高了系統效能和效率,但同時也帶來一些問題。一個是資料一致性問題。從嚴格意義上講,只要使用快取,就會出現一致性問題,這是無法解決的。另一個問題是本文將討論的快取穿透,快取擊穿和快取雪崩,這三個問題不僅限於
Redis,其他快取工具同樣需要面對這三個問題。接下來我詳細講解這三個問題以及對應的解決方案。
一、快取穿透
快取穿透意味著當使用者查詢資料庫不存在資料時,返回的結果為空,並且結果不會在快取中儲存。假設使用者不斷髮起這樣的請求,它將永遠不會訪問快取,導致所有查詢都落在資料庫上,從而導致資料庫被打死。
public Object getGoods(Long goodsId) {
//從 Redis 獲取 goods 資訊
Object goodsInfo = redisTemplate.opsForValue()
.get(String.valueOf(goodsId));
if (goodsInfo != null) {
return goodsInfo;
}
//從資料庫查詢 goods 資訊,並存入 Redis
goodsInfo = goodsDao.selectByGoodsId(goodsId);
if (goodsInfo != null) {
redisTemplate.opsForValue()
.set(String.valueOf(goodsId), goodsInfo);
}
return goodsInfo;
}
假設 goodsId 沒有負數情況,如果發起一個引數 goodsId = -1 的請求,這個資料在快取中肯定不會存在,每次它都會進入查詢資料庫,並且資料查詢結果也是 null,並且不會快取結果到 Redis。
解:
1) 透過使用者認證、引數驗證等,在上層攔截這些不合理的請求;
2) 當資料庫查詢結果為空時,資料也被快取,但快取有效期設定較短,以免影響正常資料的快取。
public Object getGoods(Long goodsId) {
//從 Redis 獲取 goods 資訊
Object goodsInfo = redisTemplate.opsForValue()
.get(String.valueOf(goodsId));
if (goodsInfo != null) {
return goodsInfo;
}
//從資料庫查詢 goods 資訊,並存入 Redis
goodsInfo = goodsDao.selectByGoodsId(goodsId);
if (goodsInfo != null) {
redisTemplate.opsForValue()
.set(String.valueOf(goodsId), goodsInfo
, 60, TimeUnit.MINUTES);
} else { //查詢為 null 同樣儲存
redisTemplate.opsForValue()
.set(String.valueOf(goodsId), null, 60,
TimeUnit.SECONDS);
}
return goodsInfo;
}
二、快取擊穿
快取擊穿意味著當熱點資料儲存到期時,多個執行緒同時請求熱點資料。因為快取剛過期,所有併發請求都會到資料庫查詢資料。
解:
實際上,在大多數實際業務場景中,快取擊穿是實時發生的,但不會對資料庫造成太大壓力,因為一般的公司業務,併發量不會那麼高。當然如果你不幸有這種情況,你可以透過設定這些熱點鍵,使其永遠不會過期。另一種方法是透過互斥鎖來控制查詢資料庫的執行緒訪問,但這種會導致系統的吞吐率下降,需要實際情況使用。
三、快取雪崩
資料未載入到快取中,或者快取同時在大範圍中失效,導致所有請求查詢資料庫,導致資料庫、CPU 和記憶體過載,甚至停機。
一個簡單的雪崩過程:
1) Redis 叢集的大面積故障;
2) 快取失敗,但仍有大量請求訪問快取服務 Redis;
3) 在大量 Redis 請求失敗後,請求轉向資料庫;
4) 資料庫請求急劇增加,導致資料庫被打死;
5) 由於你應用程式服務大部分都依賴於資料庫和 Redis 服務,它很快就會導致伺服器叢集的雪崩,最後整個系統將徹底崩潰。
解:
事前:高可用的快取
高可用的快取是防止出現整個快取故障。即使個別節點,機器甚甚至機房都關閉,系統仍然可以提供服務,Redis 哨兵(Sentinel) 和 Redis 叢集(Cluster) 都可以做到高可用。
事中:快取降級(臨時支援)
當訪問次數急劇增加導致服務出現問題時,我們如何確保服務仍然可用。在國內使用比較多的是
Hystrix,它透過熔斷、降級、限流三個手段來降低雪崩發生後的損失。只要確保資料庫不死,系統總可以響應請求,每年的春節 12306
我們不都是這麼過來的嗎?只要還可以響應起碼還有搶到票的機會。
事後:Redis 備份和快速預熱
1) Redis 資料備份和恢復
2) 快速快取預熱
四、小結
目前的大部分的系統都增加了快取機制,避免對資料庫造成過大壓力導致系統出問題,極大的提升系統穩定性。雖然使用快取能夠給系統帶來了一定的質的提升,但同時也帶來快取穿透、快取擊穿、快取雪崩問題等問題。特別是當併發量增大、惡意攻擊的時候,是很難避免。這些問題應該在設計系統時候就應該考慮,這樣設計出來的系統才經得起考驗。
想了解更多關於資料庫、雲技術的內容嗎?
快來關注“資料和雲"、"雲和恩墨,"公眾號及"雲和恩墨"官方網站,我們期待大家一同學習與進步!
資料和雲小程式”DBASK“線上問答,隨時解惑,歡迎瞭解和關注!
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/31556440/viewspace-2655083/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- 快取三大問題及解決方案快取
- 快取常見問題及解決方案快取
- redis快取相關問題及解決方案Redis快取
- 快取世界中的三大問題及解決方案快取
- Redis作為快取可能會出現的問題及解決方案Redis快取
- 快取穿透詳解及解決方案快取穿透
- Redis 快取穿透、快取雪崩原理及解決方案Redis快取穿透
- 【Redis】快取穿透,快取擊穿,快取雪崩及解決方案Redis快取穿透
- 布隆過濾器解決快取穿透問題過濾器快取穿透
- Redis快取的主要異常及解決方案Redis快取
- 快取問題(四) 快取穿透、快取雪崩、快取併發 解決案例快取穿透
- 快取熱點,快取穿透,終極解決方案看過來快取穿透
- 快取與資料庫雙寫,不一致問題及解決方案快取資料庫
- 程式碼解決快取穿透和快取雪崩問題快取穿透
- 快取穿透問題與解決方法快取穿透
- 跨域問題及解決方案跨域
- kodbox讀取alist檔案失敗,問題解決過程
- Composer 使用過程中遇到的問題和解決方案
- 阿里一面:關於【快取穿透、快取擊穿、快取雪崩、熱點資料失效】問題的解決方案阿里快取穿透
- Kafka常見的問題及解決方案Kafka
- Redis系列 - 快取雪崩、擊穿、穿透及解決方案Redis快取穿透
- Redis快取穿透解決方案--布隆過濾器Redis快取穿透過濾器
- 優雅的快取解決方案--設定過期時間快取
- WordPress:常見問題及解決方案
- 快取的三大方案以及解決方案快取
- 快取穿透、快取擊穿、快取雪崩概念及解決方案快取穿透
- REDIS快取穿透,快取擊穿,快取雪崩原因+解決方案Redis快取穿透
- JS中toFixed()方法的問題及解決方案JS
- 手摸手教你解決重定向快取問題快取
- oracle 11.2.0.4 DataGuard Broker配置過程中可能遇到的問題及解決方法Oracle
- munium學習過程中問題解決
- 記一次 Composer 問題的解決過程!!
- matplotlib中文報錯問題及解決方案
- JQuery中ajax的使用與快取問題的解決方法jQuery快取
- 動態核查|工程質量檢測機構存在8個問題及解決方案
- 多執行緒的安全問題及解決方案執行緒
- gulp外掛解決瀏覽器快取問題瀏覽器快取
- 前端使用 gulp 解決多專案快取問題前端快取