Mysql增量備份

Mysql增量備份

---

本文適合於沒有啟動複製功能的mysql,如果啟動了複製,可能不需要採取這種備份策略或者需要修改相關引數.
每個人的備份策略都可能不同,所以請根據實際情況修改,做到舉一反三,不要照搬照抄,可能會造成不必要的損失.
希望你明白這個指令碼要幹什麼工作!
　　
　　
指令碼描述

每7天備份一次所有資料,每天備份binlog,也就是增量備份.
(如果資料少,每天備份一次完整資料即可,可能沒必要做增量備份)
作者對shell指令碼不太熟悉,所以很多地方寫的很笨 :)
　　

開啟 bin log

在mysql 4.1版本中,預設只有錯誤日誌,沒有其他日誌.可以透過修改配置開啟bin log.方法很多,其中一個是在/etc/my.cnf中的mysqld部分加入:
[mysqld]
log-bin
　　
　　
這個日誌的主要作用是增量備份或者複製(可能還有其他用途).
如果想增量備份,必須開啟這個日誌.
對於資料庫操作頻繁的mysql,這個日誌會變得很大,而且可能會有多個.
在資料庫中flush-logs,或者使用mysqladmin,mysqldump呼叫flush-logs後
並且使用引數delete-master-logs,這些日誌檔案會消失,併產生新的日誌檔案(開始是空的).
所以如果從來不備份,開啟日誌可能沒有必要.
完整備份的同時可以呼叫flush-logs,增量備份之前flush-logs,以便備份最新的資料.
　　
　　

完整備份指令碼

如果資料庫資料比較多,我們一般是幾天或者一週備份一次資料,以免影響應用執行,如果資料量比較小,那麼一天備份一次也無所謂了.
載假設我們的資料量比較大,備份指令碼如下:

[root@nagiosdb mysql]# cat fullbackup.sh
#!/bin/sh
# mysql data backup script
# by scud http://www.jscud.com
# 2005-10-30
#　　
# use mysqldump --help,get more detail.
#　
BakDir=/backup/mysql
LogFile=/backup/mysql/mysqlbak.log
DATE=`date +%Y%m%d`
echo " " >> $LogFile
echo " " >> $LogFile
echo "-------------------------------------------" >> $LogFile
echo $(date +"%y-%m-%d %H:%M:%S") >> $LogFile
echo "--------------------------" >> $LogFile
cd $BakDir
DumpFile=$DATE.sql
GZDumpFile=$DATE.sql.tgz　　
mysqldump --quick --all-databases --flush-logs --delete-master-logs --lock-all-tables > $DumpFile         　　
echo "Dump Done" >> $LogFile　　
tar czvf $GZDumpFile $DumpFile >> $LogFile 2>&1
echo "[$GZDumpFile] Backup Success!" >> $LogFile

rm -f $DumpFile
#delete previous daily backup files:採用增量備份的檔案,如果完整備份後,則刪除增量備份的檔案.

cd $BakDir/daily
rm -f *         　　
cd $BakDir
echo "Backup Done!"
ls -al $BakDir
[root@nagiosdb mysql]#       
       
上面的指令碼把mysql備份到本地的/backup/mysql目錄,增量備份的檔案放在/backup/mysql/daily目錄下.
注意:上面的指令碼並沒有把備份後的檔案傳送到其他遠端計算機,也沒有刪除幾天前的備份檔案:需要使用者增加相關指令碼,或者手動操作.
　

　

增量備份
　　
增量備份的資料量比較小,但是要在完整備份的基礎上操作,使用者可以在時間和成本上權衡,選擇最有利於自己的方式.
增量備份使用bin log,指令碼如下:

 
[root@nagiosdb mysql]#
[root@nagiosdb mysql]# cat incrementalbackup.sh
#!/bin/sh
#
# mysql binlog backup script
#
/mysql/bin/mysqladmin -u root -p123456 flush-logs
DATADIR=/mysql/log
BAKDIR=/backup/mysql/daily
###如果你做了特殊設定,請修改此處或者修改應用此變數的行:預設取機器名,mysql預設也是取機器名
HOSTNAME=`uname -n`
cd $DATADIR
FILELIST=`cat mysql_bin.index`
##計算行數,也就是檔案數　　
COUNTER=0
  for file in $FILELIST
  do
    COUNTER=`expr $COUNTER + 1 `
done
 
NextNum=0
 for file in  $FILELIST
    do
      base=`basename $file`

NextNum=`expr $NextNum + 1`
   if [ $NextNum -eq $COUNTER ]
        then
            echo "skip lastest"
        else
        dest=$BAKDIR/$base
             if(test -e $dest)
                  then
                       echo "skip exist $base"
                  else
                     echo "copying $base"
                cp $base $BAKDIR
              fi
    fi
done
echo "backup mysql binlog ok"
[root@nagiosdb mysql]#

        
增量備份指令碼是備份前flush-logs,mysql會自動把記憶體中的日誌放到檔案裡,然後生成一個新的日誌檔案,
所以我們只需要備份前面的幾個即可,也就是不備份最後一個.
因為從上次備份到本次備份也可能會有多個日誌檔案生成,所以要檢測檔案,如果已經備份過,就不用備份了.
　　
　　
注:同樣,使用者也需要自己遠端傳送,不過不需要刪除了,完整備份後程式會自動生成.


自動執行
　　
為了讓備份程式自動執行,我們需要把它加入crontab.
有2種方法
一種是把指令碼根據自己的選擇放入到/etc/cron.daily,/etc/cron.weekly這麼目錄裡.
一種是使用crontab -e放入到root使用者的計劃任務裡,例如完整備份每週日凌晨執行,日常備份每週一-週六凌晨執行.
[root@nagiosdb mysql]# crontab -l
0 11 * * 0 sh /backup/mysql/fullbackup.sh
0 11 * * 1-6 sh /backup/mysql/incrementalbackup.sh