【Redis】slaveof 報錯 Background transfer error

神諭丶發表於2018-05-09
RedisError
在slave上執行slaveof到master上，遲遲未成功。
檢查master的redis程式日誌輸出如下：

  1. 427:S 03 May 20:32:07.320 * Slave 10.9.95.71:6379 asks for synchronization
  2. 427:S 03 May 20:32:07.320 * Unable to partial resync with slave $slaveip:6379 for lack of backlog (Slave request was: 5974421660).
  3. 427:S 03 May 20:32:07.320 * Delay next BGSAVE for SYNC
  4. 427:S 03 May 20:32:13.350 * Starting BGSAVE for SYNC with target: slaves sockets
  5. 427:S 03 May 20:32:14.333 * Background RDB transfer started by pid 478
  6. 427:S 03 May 20:35:04.136 # Connection with slave $slaveip lost.
  7. 427:S 03 May 20:35:04.912 # Background transfer error

手動通過stat檢查了一下rdb檔案，確認bgsave成功。
報錯也顯示為transfer error，大致判定為rdb檔案在transfer到slave的時候報錯。
 
google了一下發現應該是client-output-buffer-limit設定過小。
 
〇 client-output-buffer-limit 
在文件中指出，該引數用於限制client緩衝區的限制。
redis的client被分為三種型別：normal、slave、pubsub。
normal：正常的客戶端幷包括MONITOR客戶端
slave：slave客戶端
pubsub：pub/sub客戶端
 
其設定方式為：
client-output-buffer-limit [class] [hard limit] [soft limit] [soft seconds]
[class]為client的型別。
[hard limit]為硬限制，即超過[hard limit]值的緩衝區客戶端會被強制中斷。
[soft limit] [soft seconds]為軟限制，即持續[soft seconds]時間內，超過[soft limit]的緩衝區客戶端會被強制中斷。
 
當然，預設情況下普通client不受限制（設定為0），因為如果以推送的方式（不詢問），在請求之後才接收到資料，那麼只有非同步客戶端可能會建立一個請求資料的速度超過其讀取速度的情況。

而slave和pubsub client有一個預設限制，因為他們以推送的方式接收資料。

此處將slave的hard limit設定為32G。
 
config set client-output-buffer-limit "normal 0 0 0 slave 34359738368 268435456 600 pubsub 33554432 8388608 60" 

重新slaveof後，觀察info replication和主庫redis程式日誌，建立複製成功：

  1. 427:S 03 May 21:41:16.962 * Slave $slaveip:6379 asks for synchronization
  2. 427:S 03 May 21:41:16.984 * Full resync requested by slave $slaveip:6379
  3. 427:S 03 May 21:41:16.984 * Delay next BGSAVE for SYNC
  4. 427:S 03 May 21:41:22.712 * Starting BGSAVE for SYNC with target: slaves sockets
  5. 427:S 03 May 21:41:23.679 * Background RDB transfer started by pid 568
  6. 568:C 03 May 21:51:14.107 * RDB: xxxxx MB of memory used by copy-on-write
  7. 427:S 03 May 21:51:15.012 * Background RDB transfer terminated with success
  8. 427:S 03 May 21:51:15.012 # Slave $slaveip:6379 correctly received the streamed RDB file.
  9. 427:S 03 May 21:51:15.012 * Streamed RDB transfer with slave $slaveip:6379 succeeded (socket). Waiting for REPLCONF ACK from slave to enable streaming

複製建立好後，將client-output-buffer-limit改為預設值。



作者微信公眾號：





來自 “ ITPUB部落格 ” ，連結：http://blog.itpub.net/29773961/viewspace-2154243/，如需轉載，請註明出處，否則將追究法律責任。

相關文章