Xtrabackup備份恢復原理
一、Xtrabackup備份恢復原理
備份innodb表時，xtrabackup若干個執行緒複製獨立表空間的.ibd檔案，並不停監視此過程中redo log的變化，新增到自己的事務日誌檔案（xtrabackup_logfile）中。在此過程中，發生的
物理寫操作越多，xtrabackup_logfile越大。在複製完成後的第一個prepare階段，xtrabackup採用類似於innodb崩潰恢復的方法，把資料檔案恢復到與日誌檔案一致的狀態，並把未提交的事
務回滾。如果同時需要備份myisam表以及innodb表結構等檔案，那麼就需要用flush tables with lock來獲得全域性鎖，開始複製這些不再變化的檔案，同時獲得binlog位置，複製結束後釋放鎖，
也停止對redo log的監視。
很多同學對上面的理解有混淆，以為複製.ibd檔案就跟作業系統複製檔案一樣。其實這裡涉及到fractured page的問題，他應該會重新讀取（應該也有重試次數，超過後備份不成功）。
其實這個原理很簡單，瞭解下doublewrite就可以理解了“本段摘錄自《MySQL技術內幕：InnoDB儲存引擎》”：
如果說插入緩衝帶給InnoDB儲存引擎的是效能，那麼兩次寫帶給InnoDB儲存引擎的是資料的可靠性。當資料庫當機時，可能發生資料庫正在寫一個頁面，而這個頁只寫了一部分（比如16K的
頁，只寫前4K的頁）的情況，我們稱之為部分寫失效（partial page write）。在InnoDB儲存引擎未使用double write技術前，曾出現過因為部分寫失效而導致資料丟失的情況。
有人也許會想，如果發生寫失效，可以透過重做日誌進行恢復。這是一個辦法。但是必須清楚的是，重做日誌中記錄的是對頁的物理操作，如偏移量800，寫“aaaa”記錄。如果這個頁本身
已經損壞，再對其進行重做是沒有意義的。這就是說，在應用（apply）重做日誌前，我們需要一個頁的副本，當寫入失效發生時，先透過頁的副本來還原該頁，再進行重做，這就是doublewrite。
二、備份指令碼
#!/bin/sh
#===================================================================================================
## 備份工具：
## percona-xtrabackup-2.2.6
##
## 備份策略：
## (1)、每天凌晨04:20點進行全量備份一次；
## (2)、每隔1小時增量備份一次；
##
#===================================================================================================
PATH=/sbin:/bin:/usr/sbin:/usr/bin:/usr/local/bin:/usr/local/sbin
## DB備份基路徑
BACKUP_BASE_DIR="/data/mysql_backup"
## 增量備份時，用到的基準目錄列表檔案
## 內容格式：基準目錄|本次備份目錄|備份型別【full|inc】
INC_BASE_LIST="${BACKUP_BASE_DIR}/incremental_basedir_list.txt"
## 備份工具路徑
XTRABACKUP_PATH="/usr/local/xtrabackup/bin/innobackupex"
## MySQL配置路徑
MYSQL_CNF_PATH="/etc/my.cnf"
## 執行緒數
THREAD_CNT=6
#===================================================================================================
function print_help_info()
{
echo "--------------------------------------------------------------"
echo "Usage: $0 full | inc | help"
echo "--------------------------------------------------------------"
echo ""
exit 1
}
[[ $# -lt 1 ]] && print_help_info
[[ -d ${BACKUP_BASE_DIR} ]] || mkdir -p ${BACKUP_BASE_DIR}
## xtrabackup基礎套件不存在時，進行自動下載安裝
if [[ ! -e ${XTRABACKUP_PATH} ]]; then
cd /usr/local
wget -q -O xtrabackup-2.2.6.tgz
tar xvzf xtrabackup-2.2.6.tgz >/dev/null 2>&1 && rm -f xtrabackup-2.2.6.tgz
mv percona-xtrabackup-2.2.6-Linux-x86_64 xtrabackup-2.2.6
rm -rf xtrabackup && ln -s xtrabackup-2.2.6 xtrabackup
for FNAME in `ls -1t /usr/local/xtrabackup/bin`
do
rm -f /usr/bin/${FNAME} && ln -s /usr/local/xtrabackup/bin/${FNAME} /usr/bin/${FNAME}
done
fi
## 只允許一個副本執行，以避免全量備份與增量備份出現交叉，發生資料錯亂的可能性
##[[ -n `ps uax | grep innobackupex | grep -v grep` ]] && exit 1
## 目錄名預設精確到分鐘，為避免意外情況，導致備份任務失敗，可以精確到秒
CURRENT_BAK_PATH="${BACKUP_BASE_DIR}/"`date +%F_%H-%M`
[[ -d ${CURRENT_BAK_PATH} ]] && CURRENT_BAK_PATH="${BACKUP_BASE_DIR}/"`date +%F_%H-%M-%S`
#===================================================================================================
## 全量備份
if [[ "$1" == "full" ]]; then
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
## 增量備份
elif [[ "$1" == "inc" ]]; then
## 基準目錄列表檔案不存在或者為空的情況，需要做一次全量備份
if [[ ! -f ${INC_BASE_LIST} || `sed '/^$/d' ${INC_BASE_LIST} | wc -l` -eq 0 ]]; then
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
## 不存在任何目錄的情況，需要做一次全量備份，以避免增量備份失敗
elif [[ `find ${BACKUP_BASE_DIR} -maxdepth 1 -type d | wc -l` -eq 1 ]]; then
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
## 在上一次備份的基礎上，進行增量備份
else
PREV_BACKUP_DIR=`sed '/^$/d' ${INC_BASE_LIST} | tail -1 | awk -F '|' '{print $2}'`
## 上次的備份目錄不存在或者目錄為空的情況，以避免人為刪除的可能性【針對部分惡意刪除的情況，目前還沒有較好的檢查方法】
if [[ ! -d ${PREV_BACKUP_DIR} || -z `ls ${PREV_BACKUP_DIR}` ]]; then
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
else
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp --incremental ${CURRENT_BAK_PATH} --incremental-basedir=${PREV_BACKUP_DIR}
echo "${PREV_BACKUP_DIR}|${CURRENT_BAK_PATH}|inc" >> ${INC_BASE_LIST}
fi
fi
elif [[ "$1" == "help" ]]; then
print_help_info
else
print_help_info
fi
## 刪除2周前的資料備份
rm -rf ${BACKUP_BASE_DIR}/`date -d '14 days ago' +'%F'`_*
sed -i "/`date -d '14 days ago' +'%F'`/d" ${INC_BASE_LIST}
#===================================================================================================
##The End
####################################################################################################
## 需要新增的crontab資訊：
## (1)、全量備份
## 20 04 * * * /data/scripts/mysql_backup.sh full >/dev/null 2>&1
##
## (2)、增量備份
## 00 * * * * /data/scripts/mysql_backup.sh inc >/dev/null 2>&1
##
####################################################################################################
####################################################################################################
## DB資料恢復步驟：
## (1)、應用基準
## innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log --redo-only /data/mysql_backup/full
##
## (2)、應用第一個增量備份
## innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log --redo-only /data/mysql_backup/full --incremental-dir=/data/mysql_backup/inc_one
##
## (3)、應用第二個增量備份
## innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log /data/mysql_backup/full --incremental-dir=/data/mysql_backup/inc_two
##
## (4)、再次應用基準
## innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log /data/mysql_backup/full
##
## (5)、恢復
## innobackupex --user=root --defaults-file=/etc/my.cnf --copy-back /data/mysql_backup/full
####################################################################################################
#!/bin/sh
#===================================================================================================
## 備份工具：
## percona-xtrabackup-2.2.6
##
## 備份策略：
## (1)、每天凌晨04:20點進行全量備份一次；
## (2)、每隔1小時增量備份一次；
##
#===================================================================================================
PATH=/sbin:/bin:/usr/sbin:/usr/bin:/usr/local/bin:/usr/local/sbin
## DB備份基路徑
BACKUP_BASE_DIR="/data/mysql_backup"
## 增量備份時，用到的基準目錄列表檔案
## 內容格式：基準目錄|本次備份目錄|備份型別【full|inc】
INC_BASE_LIST="${BACKUP_BASE_DIR}/incremental_basedir_list.txt"
## 備份工具路徑
XTRABACKUP_PATH="/usr/local/xtrabackup/bin/innobackupex"
## MySQL配置路徑
MYSQL_CNF_PATH="/etc/my.cnf"
## 執行緒數
THREAD_CNT=6
#===================================================================================================
function print_help_info()
{
echo "--------------------------------------------------------------"
echo "Usage: $0 full | inc | help"
echo "--------------------------------------------------------------"
echo ""
exit 1
}
[[ $# -lt 1 ]] && print_help_info
[[ -d ${BACKUP_BASE_DIR} ]] || mkdir -p ${BACKUP_BASE_DIR}
## xtrabackup基礎套件不存在時，進行自動下載安裝
if [[ ! -e ${XTRABACKUP_PATH} ]]; then
cd /usr/local
wget -q -O xtrabackup-2.2.6.tgz
tar xvzf xtrabackup-2.2.6.tgz >/dev/null 2>&1 && rm -f xtrabackup-2.2.6.tgz
mv percona-xtrabackup-2.2.6-Linux-x86_64 xtrabackup-2.2.6
rm -rf xtrabackup && ln -s xtrabackup-2.2.6 xtrabackup
for FNAME in `ls -1t /usr/local/xtrabackup/bin`
do
rm -f /usr/bin/${FNAME} && ln -s /usr/local/xtrabackup/bin/${FNAME} /usr/bin/${FNAME}
done
fi
## 只允許一個副本執行，以避免全量備份與增量備份出現交叉，發生資料錯亂的可能性
##[[ -n `ps uax | grep innobackupex | grep -v grep` ]] && exit 1
## 目錄名預設精確到分鐘，為避免意外情況，導致備份任務失敗，可以精確到秒
CURRENT_BAK_PATH="${BACKUP_BASE_DIR}/"`date +%F_%H-%M`
[[ -d ${CURRENT_BAK_PATH} ]] && CURRENT_BAK_PATH="${BACKUP_BASE_DIR}/"`date +%F_%H-%M-%S`
#===================================================================================================
## 全量備份
if [[ "$1" == "full" ]]; then
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
## 增量備份
elif [[ "$1" == "inc" ]]; then
## 基準目錄列表檔案不存在或者為空的情況，需要做一次全量備份
if [[ ! -f ${INC_BASE_LIST} || `sed '/^$/d' ${INC_BASE_LIST} | wc -l` -eq 0 ]]; then
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
## 不存在任何目錄的情況，需要做一次全量備份，以避免增量備份失敗
elif [[ `find ${BACKUP_BASE_DIR} -maxdepth 1 -type d | wc -l` -eq 1 ]]; then
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
## 在上一次備份的基礎上，進行增量備份
else
PREV_BACKUP_DIR=`sed '/^$/d' ${INC_BASE_LIST} | tail -1 | awk -F '|' '{print $2}'`
## 上次的備份目錄不存在或者目錄為空的情況，以避免人為刪除的可能性【針對部分惡意刪除的情況，目前還沒有較好的檢查方法】
if [[ ! -d ${PREV_BACKUP_DIR} || -z `ls ${PREV_BACKUP_DIR}` ]]; then
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
else
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp --incremental ${CURRENT_BAK_PATH} --incremental-basedir=${PREV_BACKUP_DIR}
echo "${PREV_BACKUP_DIR}|${CURRENT_BAK_PATH}|inc" >> ${INC_BASE_LIST}
fi
fi
elif [[ "$1" == "help" ]]; then
print_help_info
else
print_help_info
fi
## 刪除2周前的資料備份
rm -rf ${BACKUP_BASE_DIR}/`date -d '14 days ago' +'%F'`_*
sed -i "/`date -d '14 days ago' +'%F'`/d" ${INC_BASE_LIST}
#===================================================================================================
##The End
####################################################################################################
## 需要新增的crontab資訊：
## (1)、全量備份
## 20 04 * * * /data/scripts/mysql_backup.sh full >/dev/null 2>&1
##
## (2)、增量備份
## 00 * * * * /data/scripts/mysql_backup.sh inc >/dev/null 2>&1
##
####################################################################################################
####################################################################################################
## DB資料恢復步驟：
## (1)、應用基準
## innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log --redo-only /data/mysql_backup/full
##
## (2)、應用第一個增量備份
## innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log --redo-only /data/mysql_backup/full --incremental-dir=/data/mysql_backup/inc_one
##
## (3)、應用第二個增量備份
## innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log /data/mysql_backup/full --incremental-dir=/data/mysql_backup/inc_two
##
## (4)、再次應用基準
## innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log /data/mysql_backup/full
##
## (5)、恢復
## innobackupex --user=root --defaults-file=/etc/my.cnf --copy-back /data/mysql_backup/full
####################################################################################################
備份innodb表時，xtrabackup若干個執行緒複製獨立表空間的.ibd檔案，並不停監視此過程中redo log的變化，新增到自己的事務日誌檔案（xtrabackup_logfile）中。在此過程中，發生的
物理寫操作越多，xtrabackup_logfile越大。在複製完成後的第一個prepare階段，xtrabackup採用類似於innodb崩潰恢復的方法，把資料檔案恢復到與日誌檔案一致的狀態，並把未提交的事
務回滾。如果同時需要備份myisam表以及innodb表結構等檔案，那麼就需要用flush tables with lock來獲得全域性鎖，開始複製這些不再變化的檔案，同時獲得binlog位置，複製結束後釋放鎖，
也停止對redo log的監視。
很多同學對上面的理解有混淆，以為複製.ibd檔案就跟作業系統複製檔案一樣。其實這裡涉及到fractured page的問題，他應該會重新讀取（應該也有重試次數，超過後備份不成功）。
其實這個原理很簡單，瞭解下doublewrite就可以理解了“本段摘錄自《MySQL技術內幕：InnoDB儲存引擎》”：
如果說插入緩衝帶給InnoDB儲存引擎的是效能，那麼兩次寫帶給InnoDB儲存引擎的是資料的可靠性。當資料庫當機時，可能發生資料庫正在寫一個頁面，而這個頁只寫了一部分（比如16K的
頁，只寫前4K的頁）的情況，我們稱之為部分寫失效（partial page write）。在InnoDB儲存引擎未使用double write技術前，曾出現過因為部分寫失效而導致資料丟失的情況。
有人也許會想，如果發生寫失效，可以透過重做日誌進行恢復。這是一個辦法。但是必須清楚的是，重做日誌中記錄的是對頁的物理操作，如偏移量800，寫“aaaa”記錄。如果這個頁本身
已經損壞，再對其進行重做是沒有意義的。這就是說，在應用（apply）重做日誌前，我們需要一個頁的副本，當寫入失效發生時，先透過頁的副本來還原該頁，再進行重做，這就是doublewrite。
二、備份指令碼
#!/bin/sh
#===================================================================================================
## 備份工具：
## percona-xtrabackup-2.2.6
##
## 備份策略：
## (1)、每天凌晨04:20點進行全量備份一次；
## (2)、每隔1小時增量備份一次；
##
#===================================================================================================
PATH=/sbin:/bin:/usr/sbin:/usr/bin:/usr/local/bin:/usr/local/sbin
## DB備份基路徑
BACKUP_BASE_DIR="/data/mysql_backup"
## 增量備份時，用到的基準目錄列表檔案
## 內容格式：基準目錄|本次備份目錄|備份型別【full|inc】
INC_BASE_LIST="${BACKUP_BASE_DIR}/incremental_basedir_list.txt"
## 備份工具路徑
XTRABACKUP_PATH="/usr/local/xtrabackup/bin/innobackupex"
## MySQL配置路徑
MYSQL_CNF_PATH="/etc/my.cnf"
## 執行緒數
THREAD_CNT=6
#===================================================================================================
function print_help_info()
{
echo "--------------------------------------------------------------"
echo "Usage: $0 full | inc | help"
echo "--------------------------------------------------------------"
echo ""
exit 1
}
[[ $# -lt 1 ]] && print_help_info
[[ -d ${BACKUP_BASE_DIR} ]] || mkdir -p ${BACKUP_BASE_DIR}
## xtrabackup基礎套件不存在時，進行自動下載安裝
if [[ ! -e ${XTRABACKUP_PATH} ]]; then
cd /usr/local
wget -q -O xtrabackup-2.2.6.tgz
tar xvzf xtrabackup-2.2.6.tgz >/dev/null 2>&1 && rm -f xtrabackup-2.2.6.tgz
mv percona-xtrabackup-2.2.6-Linux-x86_64 xtrabackup-2.2.6
rm -rf xtrabackup && ln -s xtrabackup-2.2.6 xtrabackup
for FNAME in `ls -1t /usr/local/xtrabackup/bin`
do
rm -f /usr/bin/${FNAME} && ln -s /usr/local/xtrabackup/bin/${FNAME} /usr/bin/${FNAME}
done
fi
## 只允許一個副本執行，以避免全量備份與增量備份出現交叉，發生資料錯亂的可能性
##[[ -n `ps uax | grep innobackupex | grep -v grep` ]] && exit 1
## 目錄名預設精確到分鐘，為避免意外情況，導致備份任務失敗，可以精確到秒
CURRENT_BAK_PATH="${BACKUP_BASE_DIR}/"`date +%F_%H-%M`
[[ -d ${CURRENT_BAK_PATH} ]] && CURRENT_BAK_PATH="${BACKUP_BASE_DIR}/"`date +%F_%H-%M-%S`
#===================================================================================================
## 全量備份
if [[ "$1" == "full" ]]; then
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
## 增量備份
elif [[ "$1" == "inc" ]]; then
## 基準目錄列表檔案不存在或者為空的情況，需要做一次全量備份
if [[ ! -f ${INC_BASE_LIST} || `sed '/^$/d' ${INC_BASE_LIST} | wc -l` -eq 0 ]]; then
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
## 不存在任何目錄的情況，需要做一次全量備份，以避免增量備份失敗
elif [[ `find ${BACKUP_BASE_DIR} -maxdepth 1 -type d | wc -l` -eq 1 ]]; then
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
## 在上一次備份的基礎上，進行增量備份
else
PREV_BACKUP_DIR=`sed '/^$/d' ${INC_BASE_LIST} | tail -1 | awk -F '|' '{print $2}'`
## 上次的備份目錄不存在或者目錄為空的情況，以避免人為刪除的可能性【針對部分惡意刪除的情況，目前還沒有較好的檢查方法】
if [[ ! -d ${PREV_BACKUP_DIR} || -z `ls ${PREV_BACKUP_DIR}` ]]; then
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
else
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp --incremental ${CURRENT_BAK_PATH} --incremental-basedir=${PREV_BACKUP_DIR}
echo "${PREV_BACKUP_DIR}|${CURRENT_BAK_PATH}|inc" >> ${INC_BASE_LIST}
fi
fi
elif [[ "$1" == "help" ]]; then
print_help_info
else
print_help_info
fi
## 刪除2周前的資料備份
rm -rf ${BACKUP_BASE_DIR}/`date -d '14 days ago' +'%F'`_*
sed -i "/`date -d '14 days ago' +'%F'`/d" ${INC_BASE_LIST}
#===================================================================================================
##The End
####################################################################################################
## 需要新增的crontab資訊：
## (1)、全量備份
## 20 04 * * * /data/scripts/mysql_backup.sh full >/dev/null 2>&1
##
## (2)、增量備份
## 00 * * * * /data/scripts/mysql_backup.sh inc >/dev/null 2>&1
##
####################################################################################################
####################################################################################################
## DB資料恢復步驟：
## (1)、應用基準
## innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log --redo-only /data/mysql_backup/full
##
## (2)、應用第一個增量備份
## innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log --redo-only /data/mysql_backup/full --incremental-dir=/data/mysql_backup/inc_one
##
## (3)、應用第二個增量備份
## innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log /data/mysql_backup/full --incremental-dir=/data/mysql_backup/inc_two
##
## (4)、再次應用基準
## innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log /data/mysql_backup/full
##
## (5)、恢復
## innobackupex --user=root --defaults-file=/etc/my.cnf --copy-back /data/mysql_backup/full
####################################################################################################
三、效果展示
# cat mysql_backup.sh
#!/bin/sh
#===================================================================================================
## 備份工具：
## percona-xtrabackup-2.2.6
##
## 備份策略：
## (1)、每天凌晨04:20點進行全量備份一次；
## (2)、每隔1小時增量備份一次；
##
#===================================================================================================
PATH=/sbin:/bin:/usr/sbin:/usr/bin:/usr/local/bin:/usr/local/sbin
## DB備份基路徑
BACKUP_BASE_DIR="/data/mysql_backup"
## 增量備份時，用到的基準目錄列表檔案
## 內容格式：基準目錄|本次備份目錄|備份型別【full|inc】
INC_BASE_LIST="${BACKUP_BASE_DIR}/incremental_basedir_list.txt"
## 備份工具路徑
XTRABACKUP_PATH="/usr/local/xtrabackup/bin/innobackupex"
## MySQL配置路徑
MYSQL_CNF_PATH="/etc/my.cnf"
## 執行緒數
THREAD_CNT=6
#===================================================================================================
function print_help_info()
{
echo "--------------------------------------------------------------"
echo "Usage: $0 full | inc | help"
echo "--------------------------------------------------------------"
echo ""
exit 1
}
[[ $# -lt 1 ]] && print_help_info
[[ -d ${BACKUP_BASE_DIR} ]] || mkdir -p ${BACKUP_BASE_DIR}
## xtrabackup基礎套件不存在時，進行自動下載安裝
if [[ ! -e ${XTRABACKUP_PATH} ]]; then
cd /usr/local
wget -q -O xtrabackup-2.2.6.tgz
tar xvzf xtrabackup-2.2.6.tgz >/dev/null 2>&1 && rm -f xtrabackup-2.2.6.tgz
mv percona-xtrabackup-2.2.6-Linux-x86_64 xtrabackup-2.2.6
rm -rf xtrabackup && ln -s xtrabackup-2.2.6 xtrabackup
for FNAME in `ls -1t /usr/local/xtrabackup/bin`
do
rm -f /usr/bin/${FNAME} && ln -s /usr/local/xtrabackup/bin/${FNAME} /usr/bin/${FNAME}
done
fi
## 只允許一個副本執行，以避免全量備份與增量備份出現交叉，發生資料錯亂的可能性
##[[ -n `ps uax | grep innobackupex | grep -v grep` ]] && exit 1
## 目錄名預設精確到分鐘，為避免意外情況，導致備份任務失敗，可以精確到秒
CURRENT_BAK_PATH="${BACKUP_BASE_DIR}/"`date +%F_%H-%M`
[[ -d ${CURRENT_BAK_PATH} ]] && CURRENT_BAK_PATH="${BACKUP_BASE_DIR}/"`date +%F_%H-%M-%S`
#===================================================================================================
## 全量備份
if [[ "$1" == "full" ]]; then
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
## 增量備份
elif [[ "$1" == "inc" ]]; then
## 基準目錄列表檔案不存在或者為空的情況，需要做一次全量備份
if [[ ! -f ${INC_BASE_LIST} || `sed '/^$/d' ${INC_BASE_LIST} | wc -l` -eq 0 ]]; then
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
## 不存在任何目錄的情況，需要做一次全量備份，以避免增量備份失敗
elif [[ `find ${BACKUP_BASE_DIR} -maxdepth 1 -type d | wc -l` -eq 1 ]]; then
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
## 在上一次備份的基礎上，進行增量備份
else
PREV_BACKUP_DIR=`sed '/^$/d' ${INC_BASE_LIST} | tail -1 | awk -F '|' '{print $2}'`
## 上次的備份目錄不存在或者目錄為空的情況，以避免人為刪除的可能性【針對部分惡意刪除的情況，目前還沒有較好的檢查方法】
if [[ ! -d ${PREV_BACKUP_DIR} || -z `ls ${PREV_BACKUP_DIR}` ]]; then
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
else
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp --incremental ${CURRENT_BAK_PATH} --incremental-basedir=${PREV_BACKUP_DIR}
echo "${PREV_BACKUP_DIR}|${CURRENT_BAK_PATH}|inc" >> ${INC_BASE_LIST}
fi
fi
elif [[ "$1" == "help" ]]; then
print_help_info
else
print_help_info
fi
## 刪除2周前的資料備份
rm -rf ${BACKUP_BASE_DIR}/`date -d '14 days ago' +'%F'`_*
sed -i "/`date -d '14 days ago' +'%F'`/d" ${INC_BASE_LIST}
#===================================================================================================
##The End
####################################################################################################
## 需要新增的crontab資訊：
## (1)、全量備份
## 20 04 * * * /data/scripts/mysql_backup.sh full >/dev/null 2>&1
##
## (2)、增量備份
## 00 * * * * /data/scripts/mysql_backup.sh inc >/dev/null 2>&1
##
####################################################################################################
####################################################################################################
## DB資料恢復步驟：
## (1)、應用基準
## innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log --redo-only /data/mysql_backup/full
##
## (2)、應用第一個增量備份
## innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log --redo-only /data/mysql_backup/full --incremental-dir=/data/mysql_backup/inc_one
##
## (3)、應用第二個增量備份
## innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log /data/mysql_backup/full --incremental-dir=/data/mysql_backup/inc_two
##
## (4)、再次應用基準
## innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log /data/mysql_backup/full
##
## (5)、恢復
## innobackupex --user=root --defaults-file=/etc/my.cnf --copy-back /data/mysql_backup/full
####################################################################################################
來自 “ ITPUB部落格 ” ，連結：http://blog.itpub.net/9034054/viewspace-2052132/，如需轉載，請註明出處，否則將追究法律責任。
相關文章
- 【Xtrabackup】Xtrabackup全備、增量備份及恢復示例
- MySQL備份與恢復——基於Xtrabackup物理備份恢復MySql
- 【MySQL】Xtrabackup備份及恢復指令碼MySql指令碼
- 【Mysql】xtrabackup 備份和恢復測試MySql
- Percona XtraBackup 2.4 xtrabackup全量、增量備份恢復流程
- Xtrabackup之innobackupex備份恢復詳解薦
- mysql備份和恢復測試(一）--xtrabackupMySql
- RMAN備份恢復原理
- 使用xtrabackup對mysql進行備份和恢復MySql
- Percona XtraBackup 實現全備&增量備份與恢復
- 揭密備份恢復的原理
- XtraBackup完整備份與增量備份的原理
- MySQL · 物理備份 · Percona XtraBackup 備份原理MySql
- xtrabackup和innobackuppex的安裝和備份(含增量備份)已經恢復
- MySQL運維實戰之備份和恢復（8.1）xtrabackup全量備份MySql運維
- 備份恢復原理的實踐
- oracle備份恢復的大致原理！Oracle
- Percona XtraBackup 2.4 innobackupex全量、增量備份恢復流程
- Xtrabackup實現資料庫備份和災難恢復資料庫
- MySQL 5.6 xtrabackup 全量和增量的備份和恢復MySql
- 【備份恢復】從備份恢復資料庫資料庫
- 【管理篇備份恢復】備份恢復基礎
- Oracle備份恢復之熱備份恢復及異機恢復Oracle
- Xtrabackup2.4.8備份、還原、恢復Mysql5.7.19實操MySql
- 從原始碼分析 XtraBackup 的備份原理原始碼
- 備份與恢復--利用備份的控制檔案恢復
- mysql之 xtrabackup原理、備份日誌分析、備份資訊獲取MySql
- Mysql備份恢復MySql
- Postgresql 備份恢復SQL
- redis備份恢復Redis
- mysql 備份恢復MySql
- XtraBackup備份原理和優缺點介紹
- MySQL Xtrabackup備份原理和實現細節MySql
- MySQL：xtrabackup備份MySql
- XtraBackup備份MySQLMySql
- 備份與恢復：polardb資料庫備份與恢復資料庫
- 【備份恢復】Oracle 資料備份與恢復微實踐Oracle
- 基於percona xtrabackup 2.4.14的增量備份恢復還原mysql 5.6MySql