Redis入門第十篇【持久化】

weixin_34370347發表於2018-01-21
Redis持久化

tags: Redis title: Redis入門第十篇【持久化】

Redis持久化機制

  • 1). RDB持久化：
    • 該機制是指在指定的時間間隔內將記憶體中的資料集快照寫入磁碟。
  • 2). AOF持久化:
    • 該機制將以日誌的形式記錄伺服器所處理的每一個寫操作，在Redis伺服器啟動之初會讀取該檔案來重新構建資料庫，以保證啟動後資料庫中的資料是完整的。
  • 3). 無持久化：
    • 我們可以通過配置的方式禁用Redis伺服器的持久化功能，這樣我們就可以將Redis視為一個功能加強版的memcached了。
  • 4). 同時應用AOF和RDB。

對應的配置檔案：


   1. Snapshotting:
    預設情況下，Redis會將資料集的快照dump到dump.rdb檔案中。此外，我們也可以通過配置檔案來修改Redis伺服器dump快照的頻率，在開啟6379.conf檔案之後，我們搜尋save，可以看到下面的配置資訊：
    save 900 1              #在900秒(15分鐘)之後，如果至少有1個key發生變化，則dump記憶體快照。
    save 300 10            #在300秒(5分鐘)之後，如果至少有10個key發生變化，則dump記憶體快照。
    save 60 10000        #在60秒(1分鐘)之後，如果至少有10000個key發生變化，則dump記憶體快照。
    
   2. Dump快照的機制：
    1). Redis先fork子程式。
    2). 子程式將快照資料寫入到臨時RDB檔案中。
    3). 當子程式完成資料寫入操作後，再用臨時檔案替換老的檔案。
    

複製程式碼

RDB機制的優勢和劣勢

RDB存在哪些優勢呢？

  • 1). 一旦採用該方式，那麼你的整個Redis資料庫將只包含一個檔案，這對於檔案備份而言是非常完美的。比如，你可能打算每個小時歸檔一次最近24小時的資料，同時還要每天歸檔一次最近30天的資料。通過這樣的備份策略，一旦系統出現災難性故障，我們可以非常容易的進行恢復。
  • 2). 對於災難恢復而言，RDB是非常不錯的選擇。因為我們可以非常輕鬆的將一個單獨的檔案壓縮後再轉移到其它儲存介質上。
  • 3). 效能最大化。對於Redis的服務程式而言，在開始持久化時，它唯一需要做的只是fork出子程式，之後再由子程式完成這些持久化的工作，這樣就可以極大的避免服務程式執行IO操作了。
  • 4). 相比於AOF機制，如果資料集很大，RDB的啟動效率會更高。

RDB又存在哪些劣勢呢？

  • 1). 如果你想保證資料的高可用性，即最大限度的避免資料丟失，那麼RDB將不是一個很好的選擇。因為系統一旦在定時持久化之前出現當機現象，此前沒有來得及寫入磁碟的資料都將丟失。
  • 2). 由於RDB是通過fork子程式來協助完成資料持久化工作的，因此，如果當資料集較大時，可能會導致整個伺服器停止服務幾百毫秒，甚至是1秒鐘。

AOF機制的優勢和劣勢

AOF的優勢有哪些呢？

  • 1). **該機制可以帶來更高的資料安全性，即資料永續性。**Redis中提供了3中同步策略，即每秒同步、每修改同步和不同步。事實上，每秒同步也是非同步完成的，其效率也是非常高的，所差的是一旦系統出現當機現象，那麼這一秒鐘之內修改的資料將會丟失。而每修改同步，我們可以將其視為同步持久化，即每次發生的資料變化都會被立即記錄到磁碟中。可以預見，這種方式在效率上是最低的。至於無同步，無需多言，我想大家都能正確的理解它。
  • 2). 由於該機制對日誌檔案的寫入操作採用的是append模式，因此在寫入過程中即使出現當機現象，也不會破壞日誌檔案中已經存在的內容。然而如果我們本次操作只是寫入了一半資料就出現了系統崩潰問題，不用擔心，在Redis下一次啟動之前，我們可以通過redis-check-aof工具來幫助我們解決資料一致性的問題。
  • 3). 如果日誌過大，Redis可以自動啟用rewrite機制。即Redis以append模式不斷的將修改資料寫入到老的磁碟檔案中，同時Redis還會建立一個新的檔案用於記錄此期間有哪些修改命令被執行。因此在進行rewrite切換時可以更好的保證資料安全性。
  • 4). AOF包含一個格式清晰、易於理解的日誌檔案用於記錄所有的修改操作。事實上，我們也可以通過該檔案完成資料的重建。

AOF的劣勢有哪些呢？

  • 1). 對於相同數量的資料集而言，AOF檔案通常要大於RDB檔案。
  • 2). 根據同步策略的不同，AOF在執行效率上往往會慢於RDB。總之，每秒同步策略的效率是比較高的，同步禁用策略的效率和RDB一樣高效。

對應的配置檔案



   3. AOF檔案：
    上面已經多次講過，RDB的快照定時dump機制無法保證很好的資料永續性。如果我們的應用確實非常關注此點，我們可以考慮使用Redis中的AOF機制。對於Redis伺服器而言，其預設的機制是RDB，如果需要使用AOF，則需要修改配置檔案中的以下條目：
    將appendonly no改為appendonly yes
    從現在起，Redis在每一次接收到資料修改的命令之後，都會將其追加到AOF檔案中。在Redis下一次重新啟動時，需要載入AOF檔案中的資訊來構建最新的資料到記憶體中。
    
   4. AOF的配置：
    在Redis的配置檔案中存在三種同步方式，它們分別是：
    appendfsync always     #每次有資料修改發生時都會寫入AOF檔案。
    appendfsync everysec  #每秒鐘同步一次，該策略為AOF的預設策略。
    appendfsync no          #從不同步。高效但是資料不會被持久化。

複製程式碼

修復損壞的AOF檔案

  • 1). 將現有已經壞損的AOF檔案額外拷貝出來一份。
  • 2). 執行"redis-check-aof --fix "命令來修復壞損的AOF檔案。
  • 3). 用修復後的AOF檔案重新啟動Redis伺服器。

Redis資料備份

在Redis中我們可以通過copy的方式線上備份正在執行的Redis資料檔案。這是因為RDB檔案一旦被生成之後就不會再被修改。Redis每次都是將最新的資料dump到一個臨時檔案中，之後在利用rename函式原子性的將臨時檔案改名為原有的資料檔名。因此我們可以說，在任意時刻copy資料檔案都是安全的和一致的。鑑於此，我們就可以通過建立cron job的方式定時備份Redis的資料檔案，並將備份檔案copy到安全的磁碟介質中。


redis持久化，兩種方式
1、rdb快照方式
2、aof日誌方式

----------rdb快照------------
save 900 1
save 300 10
save 60 10000

stop-writes-on-bgsave-error yes
rdbcompression yes
rdbchecksum yes
dbfilename dump.rdb
dir /var/rdb/

-----------Aof的配置-----------
appendonly no # 是否開啟 aof日誌功能

appendfsync always #每一個命令都立即同步到aof，安全速度慢
appendfsync everysec
appendfsync no 寫入工作交給作業系統，由作業系統判斷緩衝區大小，統一寫入到aof  同步頻率低，速度快


no-appendfsync-on-rewrite yes 正在匯出rdb快照的時候不要寫aof
auto-aof-rewrite-percentage 100
auto-aof-rewrite-min-size 64mb 


./bin/redis-benchmark -n 20000
複製程式碼

如果您覺得這篇文章幫助到了您，可以給作者一點鼓勵

相關文章