MYSQL定時任務-定時清除備份資料

lonecloud發表於2019-06-18

背景

由於專案需要,每個月的歷史存量資料需要進行一個歸檔和備份操作,以及一些日誌表需要進行一個明細欄位清除,讓mysql資料庫磁碟節省空間。則需要一些定時任務來定時清理這些資料。

技術選型

  1. Java 可以基於Quartz/Timer來使用定時任務機制來編寫定時任務,需要依賴於Java程式
  2. 基於Linux下Crontab來基於cron表示式構建定時任務文件必定需要編寫對應的指令碼,但是在這個指令碼中,由於需要運算元據庫,必定會涉及到明文密碼這樣的一個資料,這樣不是很安全。
  3. 由於使用到的是MYSQL資料庫,而MYSQL又支援定時任務,所以可以使用MYSQL自帶定時任務。

具體操作

mysql配置

  1. 由於定時任務這個選項在mysql的預設配置是關閉的,所以保險起見,我們先查詢一下該選項是否開啟
show variables like '%event_scheduler%';

如果顯示的為Off選項,有提供如下兩種方式對其進行修改

​ 1. 語句方式(當前啟動的例項有效,重啟後無效)

set global event_scheduler=1;

​ 2. 配置my.cnf(windows下是my.ini)下新增如下選項

[mysqld]
event_scheduler=ON 

MYSQL定時任務-定時清除備份資料

然後將其儲存後重啟mysql即可

sql編寫

  1. 建立儲存過程(procedure)[可選:如果只是簡單sql可以直接在定時任務中指定]

儲存過程:儲存過程,又稱儲存程式(英語:Stored Procedure),是在資料庫儲存複雜程式,以便外部程式呼叫的資料庫物件,可以視為資料庫的一種函式或子程式。

具體學習地址:點我

create PROCEDURE sched_clean() --命名
BEGIN
-- 定義引數
 DECLARE begin_time BIGINT DEFAULT UNIX_TIMESTAMP(DATE_SUB(CURRENT_DATE(),interval 31 DAY))*1000;
 DECLARE end_time BIGINT DEFAULT UNIX_TIMESTAMP(DATE_SUB(CURRENT_DATE(),interval 30 DAY))*1000;
 -- 更新資料
 UPDATE test_table SET rule_cost=null WHERE start_time>begin_time and start_time<end_time;
END
  1. 建立定時任務

當建立好了儲存過程後,我們就可以定時呼叫該儲存過程了

CREATE EVENT `demo`.`day_of_clean_event`
ON SCHEDULE EVERY '1' DAY STARTS DATE_ADD(DATE_ADD(CURDATE(), INTERVAL 1 DAY), INTERVAL 1 HOUR)
ON completion preserve disable
DO call sched_clean();

程式碼說明:

  1. CREATE EVENT demo.day_of_clean_event在demo資料庫中建立一個名為day_of_clean_event事件
  2. 表示建立時間定時週期,以及開始時間,該處表示從明天1點從開始,每天執行一次該任務
  3. 第三行表示建立後並不開始生效
  4. 第四行表示需要執行的任務(這裡你也可以直接編寫sql語句)

相關查詢

  1. 查詢本機的所有事件
SELECT event_name,event_definition,interval_value,interval_field,status FROM information_schema.EVENTS;
  1. 開啟/關閉已經建立好的事件
alter event event_name on completion preserve enable;//開啟定時任務
alter event event_name on completion preserve disable;//關閉定時任務

值得注意的地方

  1. 如果你的全域性引數沒有配置開啟定時任務,則會導致你雖然執行了開啟已經建立好的事件,但是你在information_schema.EVENTS表中還是查詢不到記錄

常見的週期定時規則

① 週期執行 – 關鍵字 EVERY

單位有:second, minute, hour, day, week(周), quarter(季度), month, year,如:

on schedule every 1 second      //每秒執行1次
on schedule every 2 minute      //每兩分鐘執行1次
on schedule every 3 day         //每3天執行1次

② 在具體某個時間執行 – 關鍵字 AT, 如:

on schedule at current_timestamp()+interval 5 day   // 5天后執行
on schedule at current_timestamp()+interval 10 minute   // 10分鐘後執行
on schedule at '2016-10-01 21:50:00'        // 在2016年10月1日,晚上9點50執行

③ 在某個時間段執行 – 關鍵字 STARTS ENDS, 如:

on schedule every 1 day starts current_timestamp()+interval 5 day ends current_timestamp()+interval 1 month // 5天后開始每天都執行執行到下個月底
on schedule every 1 day ends current_timestamp()+interval 5 day //從現在起每天執行,執行5天

相關文章