定時備份 MySQL 並上傳到七牛

Jioby發表於2018-10-10
MySql

多數應用場景下，我們需要對重要資料進行備份、並放置到一個安全的地方，以備不時之需。

常見的 MySQL 資料備份方式有，直接打包複製對應的資料庫或表檔案(物理備份)、mysqldump 全量邏輯備份、xtrabackup 增量邏輯備份等。

常見的資料儲存方式有，本機儲存、FTP 上傳到遠端伺服器、雲端儲存(如阿里雲OSS、七牛雲端儲存等)、甚至本地也行。

我們可能不想每次都手動去備份，也不想每次都那麼耗時間的去下載，也不想就放在伺服器上丟了，因為我們需要異地備份。那我們可以嘗試，寫個指令碼定時備份資料庫，然後自動上傳到指定伺服器或雲端儲存。

這裡，我們說說 Linux 伺服器下備份 MySQL 並上傳到七牛雲端儲存的方式。

準備工作

  • Linux 系統
  • crontab 服務

    需保證 crond 服務處於啟動&自啟動狀態。

  • gzip 命令

    需系統能正常執行 gzip 命令，用於壓縮檔案。

  • mysqldump 命令

    需系統能正常執行 mysqldump 命令，用於邏輯備份資料。mysqldump 備份的資料，系由可執行的 SQL 組成，不存在版本不相容的問題。

  • qshell 工具

    qshell 是七牛雲官方利用七牛文件上公開的 API 實現的一個方便開發者測試和使用七牛 API 服務的命令列工具。

    具體文件和下載地址: https://developer.qiniu.com/k…

  • 七牛雲賬號

    儲存資料的前提當然是先有一個七牛的賬號，七牛對個人提供10G的免費儲存空間，可供我們個人使用。註冊地址:
    https://portal.qiniu.com/sign…

  • 七牛儲存空間

    有了七牛雲的賬號後，還需在控制檯手動建立一個空間(bucket)來存放資料。

qshell 配置

我們從官方地址中下載的 qshell 是個包含支援多個系統平臺的壓縮包，選擇我們對應系統的那個二進位制檔案，賦予其可執行許可權。也可以放置到 /usr/local/bin/ 等目錄下，方便直接呼叫 qshell 命令。

配置七牛賬號，ak、sk 在七牛雲控制檯 > 個人中心 > 金鑰管理內。

qshell account ak sk

該命令會將 ak/sk 賬號寫入 ~/.qshell/account.json，此後就不用再配置了。

我們這裡用的 qshell 命令是 rput，即以分片上傳的方式上傳一個檔案，使用文件: https://github.com/qiniu/qshe…

qshell rput <Bucket> <Key> <LocalFile> true

qshell 的其他詳細功能使用，可自行參考其文件。

指令碼內容

#!/bin/sh
# mysql data backup script
#
# use mysqldump --help,get more detail.

dbname=your_dbname
user=your_db_username
password=your_db_password
bakDir=/opt/backup/sql
logFile=/opt/backup/mysqlbak.log
datetime=`date +%Y%m%d%H%M%S`
keepDay=7

echo "-------------------------------------------" >> $logFile
echo $(date +"%y-%m-%d %H:%M:%S") >> $logFile
echo "--------------------------" >> $logFile
cd $bakDir
bakFile=$dbname.$datetime.sql.gz
mysqldump -u$user -p$password $dbname | gzip > $bakFile
echo "資料庫 [$dbname] 備份完成" >> $logFile
echo "$bakDir/$bakFile" >> $logFile
echo "開始上傳備份檔案至七牛雲端儲存" >> $logFile
/usr/local/bin/qshell rput <Bucket> database/$bakFile $bakFile true | sed -r "s/x1B[([0-9]{1,2}(;[0-9]{1,2})?)?[m|K]//g" >> $logFile 2>&1
echo "刪除${keepDay}天前的備份檔案" >> $logFile
find $bakDir -ctime +$keepDay >> $logFile
find $bakDir -ctime +$keepDay -exec rm -rf {} ;
echo " " >> $logFile
echo " " >> $logFile

指令碼中的資料庫配置、日誌檔案、存放路徑、<Bucket>等需自行修改，並存在。database/$bakFile，表示的是 <Key>，即在七牛儲存中的路徑&檔名，可自定義。

指令碼檔案需可執行許可權，然後可以執行指令碼進行測試。

定時任務

# 每天凌晨2點執行備份指令碼
0 2 * * * /opt/backup/baksql.sh

如果定時任務未執行，可檢視日誌 /var/log/cron 排查問題，或者檢視 crond 是否處於執行狀態。

原文地址: https://shockerli.net/post/my…
更多文章請訪問我的個人部落格: https://shockerli.net

相關文章