spring4.x 整合quartz2.x 叢集化配置專案例項

idgq發表於2018-05-18

前言

前段時間領導讓將一個老專案中的定時傳送簡訊的中定時任務獨立出來，實現一個可公用的定時任務平臺,且需要支援叢集環境.
基於以上需要實現的功能有：
1. 定時任務管理：包括任務的crud, 任務的暫停、恢復
2. 任務可持久化

具體實現

1. pom.xml檔案中加入所需jar包(這裡spring相關的jar就不展示了)

<dependency>
    <groupId>org.quartz-scheduler</groupId>
    <artifactId>quartz</artifactId>
    <version>2.2.3</version>
</dependency>

2. quartz.properties 配置檔案

# Configure Main Scheduler Properties ===========================================
#可以為任何值，用在jdbc Jobstore中來唯一標識例項，叢集中必須相同
org.quartz.scheduler.instanceName: MyClusteredScheduler
#AUTO 基於主機和時間戳來產生成例項ID，叢集中的每一個例項都必須有一個唯一的“instance id”, 應該有相同的“scheduler instance name”
org.quartz.scheduler.instanceId: AUTO
#禁用quartz軟體更新
org.quartz.scheduler.skipUpdateCheck: true

#Configure ThreadPool  執行任務執行緒池配置==============================================
#執行緒池型別，執行任務的執行緒
org.quartz.threadPool.class: org.quartz.simpl.SimpleThreadPool
#執行緒數量
org.quartz.threadPool.threadCount: 2
#執行緒優先順序
org.quartz.threadPool.threadPriority: 5
org.quartz.threadPool.threadsInheritContextClassLoaderOfInitializingThread = true


# Configure JobStore  任務儲存方式 ====================================================
org.quartz.jobStore.misfireThreshold: 60000
#兩種儲存方式：基於記憶體的RAMJobStore和基於資料庫的JobStoreSuppot
#(包括JobStoreTX和JobStoreCMT兩種實現，JobStoreCMT是依賴於容器來進行事務管理，而JobStoreTX是自己管理事務)
#這裡的屬性為JobStoreTX,將任務持久化到資料庫，
#因為叢集中節點依賴資料庫來傳播Scheduler例項的狀態，意味著在叢集裡必須使用JobStoreTX或是JobStoreCMT作為job儲存
#org.quartz.simpl.RAMJobStore
org.quartz.jobStore.class=org.quartz.impl.jdbcjobstore.JobStoreTX

#JobStoreSupport 使用一個驅動代理來操作 trigger 和 job 的資料儲存
org.quartz.jobStore.driverDelegateClass=org.quartz.impl.jdbcjobstore.oracle.OracleDelegate
#若要設定為true，則將JobDataMaps中的值當作string
org.quartz.jobStore.useProperties=false
#你就告訴了Scheduler例項要它參與到一個叢集當中。這一屬性會貫穿於排程框架的始終，用於修改叢集環境中操作的預設行為。
org.quartz.jobStore.isClustered=true
#屬性定義了Scheduler例項檢入到資料庫中的頻率(單位：毫秒)。預設值是 15000 (即15 秒)。
org.quartz.jobStore.clusterCheckinInterval = 20000
org.quartz.jobStore.isClustered=true

#這是 JobStore 能處理的錯過觸發的 Trigger 的最大數量。
#處理太多(超過兩打) 很快會導致資料庫表被鎖定夠長的時間，這樣就妨礙了觸發別的(還未錯過觸發) trigger 執行的效能。
org.quartz.jobStore.maxMisfiresToHandleAtATime = 1
org.quartz.jobStore.misfireThreshold = 120000
org.quartz.jobStore.txIsolationLevelSerializable = false

#當事件的JVM終止後，在排程器上也將此事件終止
org.quartz.plugin.shutdownHook.class: org.quartz.plugins.management.ShutdownHookPlugin
org.quartz.plugin.shutdownHook.cleanShutdown: true




#============================================================================
# Other Example Delegates 其他的資料庫驅動管理委託類
#============================================================================
#org.quartz.jobStore.driverDelegateClass=org.quartz.impl.jdbcjobstore.DB2v6Delegate
#org.quartz.jobStore.driverDelegateClass=org.quartz.impl.jdbcjobstore.DB2v7Delegate
#org.quartz.jobStore.driverDelegateClass=org.quartz.impl.jdbcjobstore.DriverDelegate
#org.quartz.jobStore.driverDelegateClass=org.quartz.impl.jdbcjobstore.HSQLDBDelegate
#org.quartz.jobStore.driverDelegateClass=org.quartz.impl.jdbcjobstore.MSSQLDelegate
#org.quartz.jobStore.driverDelegateClass=org.quartz.impl.jdbcjobstore.PointbaseDelegate
#org.quartz.jobStore.driverDelegateClass=org.quartz.impl.jdbcjobstore.PostgreSQLDelegate
#org.quartz.jobStore.driverDelegateClass=org.quartz.impl.jdbcjobstore.StdJDBCDelegate
#org.quartz.jobStore.driverDelegateClass=org.quartz.impl.jdbcjobstore.WebLogicDelegate
#org.quartz.jobStore.driverDelegateClass=org.quartz.impl.jdbcjobstore.oracle.OracleDelegate
#org.quartz.jobStore.driverDelegateClass=org.quartz.impl.jdbcjobstore.oracle.WebLogicOracleDelegate

3. springContext-quartz.xml 與spring整合

<?xml version="1.0" encoding="UTF-8"?>
<beans
    xmlns="http://www.springframework.org/schema/beans" 
    xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" 
    xmlns:context="http://www.springframework.org/schema/context" 
    xmlns:task="http://www.springframework.org/schema/task"
    xsi:schemaLocation="
        http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans-4.3.xsd 
        http://www.springframework.org/schema/context http://www.springframework.org/schema/context/spring-context-4.3.xsd
        http://www.springframework.org/schema/task http://www.springframework.org/schema/task/spring-task-4.3.xsd ">
    
    <!-- 排程器 -->
    <bean id="clusterScheduler" lazy-init="false" class="org.springframework.scheduling.quartz.SchedulerFactoryBean">
        <!--因為叢集環境下需要將任務狀態持久化  這裡需要為排程器指定一個資料來源，
        同時需要將quartz框架相關的幾個表在你的資料庫中初始化好，去官網下載quartz的壓縮包quartz-2.2.3-distribution.tar.gz,解壓之後在docsdbTables檔案下就可以找到與之相對應的sql檔案
        -->
           <property name="dataSource" ref="dataSourceRWORR"/>
        <property name="configLocation" value="classpath:conf/quartz.properties" />
        <property name="applicationContextSchedulerContextKey" value="applicationContext"/>
        <property name="autoStartup" value="true"></property>
    </bean>
    
    <!--quartz定時任務管理類 
        QuartzManager： 該類由自己實現，需要為該類注入上文中定義的排程器：clusterScheduler
        有關定時器的所有操作都在該類中實現
    -->  
    <bean id="quartzManager" class="com.fotic.common.quartz.QuartzManager" init-method="init">
        <property name="clusterScheduler" ref="clusterScheduler"></property>
    </bean>
</beans>

4. 編寫定時器管理類：QuartzManager.java

package com.fotic.common.quartz;

import org.quartz.CronScheduleBuilder;
import org.quartz.CronTrigger;
import org.quartz.Job;
import org.quartz.JobBuilder;
import org.quartz.JobDetail;
import org.quartz.JobKey;
import org.quartz.Scheduler;
import org.quartz.SchedulerException;
import org.quartz.Trigger;
import org.quartz.TriggerBuilder;
import org.quartz.TriggerKey;
import org.slf4j.Logger;
import org.slf4j.LoggerFactory;
/*
* @Description: 定時器管理
* @author dgq 
* @date 2018年4月25日
*/
public class QuartzManager{
    
    private static Logger logger = LoggerFactory.getLogger(QuartzManager.class);
    
    private Scheduler clusterScheduler;//專案啟動時注入  
    
    public void init() throws SchedulerException{
        /*JobKey jobKey = JobKey.jobKey("sms_job", "sms_job_group");
        JobDetail jobDetail = clusterScheduler.getJobDetail(jobKey);//xml中配置了 
   
        List<? extends Trigger> tigge1 = clusterScheduler.getTriggersOfJob(jobKey);
        System.out.println(tigge1.size());
        Trigger trigger3 = tigge1.get(0);
        
        TriggerKey triggerKey = TriggerKey.triggerKey("sms_trigger", "sms_trigger_group");
        Trigger trigger = clusterScheduler.getTrigger(triggerKey);
        
        TriggerState triggerState2 = clusterScheduler.getTriggerState(triggerKey);
        
        Set<String> pausedTriggerGroups = clusterScheduler.getPausedTriggerGroups();
        
        
        clusterScheduler.scheduleJob(trigger);*/
        
         /*TriggerKey triggerKey = TriggerKey.triggerKey("sms_trigger", "sms_trigger_group");
        clusterScheduler.getListenerManager().addTriggerListener(new MyTriggerListeners(), KeyMatcher.keyEquals(triggerKey));*/
        try {
            
            this.addJob("push_overduedata", "com.fotic.management.sms.job.PushOverdueDataJob", "0 55 17 * * ?");
            this.addJob("sms_send", "com.fotic.sms.job.SmsSendJob", "0/5 * * ? * *");
        } catch (Exception e) {
            e.printStackTrace();
        }
    }
    
    /**
     * 啟動定時器
     */
    public boolean start(){
        try {
            clusterScheduler.start();
            return true;
        } catch ( SchedulerException e) {
            e.printStackTrace();
            return false;
        }
    }
    
    /**
     * 關閉排程器
     * @return
     */
    public boolean shutdown(){
        try {
            clusterScheduler.shutdown(true);
            return true;
        } catch (Exception e) {
            logger.info("定時器停止失敗................");
            e.printStackTrace();
            return false;
        }
    }
    
    public void setClusterScheduler(Scheduler clusterScheduler) {  
        this.clusterScheduler = clusterScheduler;  
    }
    
    /**
     * 新增一個job
     * @param jobName job名稱
     * @param jobClass  job類，該類必須繼承: org.quartz.job
     * @param cronExpression "0/5 * * ? * *"
     * @throws ClassNotFoundException 
     * @throws SchedulerException 
     */
    public void addJob(String jobName, String jobClassPath, String cronExpression) throws ClassNotFoundException, SchedulerException{
            
        JobKey jobKey = new JobKey(jobName+"_job", jobName+"_group");
        
        JobDetail jobDetail = clusterScheduler.getJobDetail(jobKey);
        if(!clusterScheduler.checkExists(jobKey)){
            @SuppressWarnings("unchecked")
            Class<? extends Job> targetJob = (Class<? extends Job>) Class.forName(jobClassPath);
            jobDetail = JobBuilder
                    .newJob(targetJob)
                    .withIdentity(jobKey)
                    .build();
            Trigger trigger = TriggerBuilder.newTrigger()
                    .withIdentity(jobName+"_trigger", jobName+"_trigger_group")
                    .withSchedule(CronScheduleBuilder.cronSchedule(cronExpression))
                    .build();
            
            clusterScheduler.scheduleJob(jobDetail, trigger);
        }
        
    }
    
    /** 
     * 暫停定時任務 
     * @param allPushMessage 
     * @throws Exception 
     */  
    public void pauseJob(String jobName) throws Exception {  
        JobKey jobKey = JobKey.jobKey(jobName+"_job", jobName+"_group");  
        try {
            clusterScheduler.pauseJob(jobKey); 
        } catch (SchedulerException e) {  
            logger.info("暫停定時任務失敗"+e);  
            throw new Exception("暫停定時任務失敗");  
        }  
    }  
  
    /** 
     * 恢復任務 
     * @param 
     * @param 
     * @param 
     * @throws Exception 
     */  
    public void resumeJob(String jobName) throws Exception {
  
        JobKey jobKey = JobKey.jobKey(jobName+"_job", jobName+"_group");  
        try {
            clusterScheduler.resumeJob(jobKey);
        } catch (SchedulerException e) {  
            logger.info("恢復定時任務失敗"+e);  
            throw new Exception("恢復定時任務失敗");  
        }  
    }
    
    /**
     * 刪除任務
     * @param jobName
     * @throws Exception
     */
    public void deleteJob(String jobName) throws Exception {
        JobKey jobKey = JobKey.jobKey(jobName+"_job", jobName+"_group"); 
        try {
            clusterScheduler.deleteJob(jobKey);
        } catch (SchedulerException e) {
            logger.info("刪除定時任務失敗"+e);
            throw new Exception("刪除定時任務失敗");  
        }
    }
    
    /**
     * 修改一個觸發器的觸發規則cron Expression
     * @param triggerName
     * @param cron
     * @return
     */
    public boolean updateTrigger(String triggerName, String cron){
        try {
            CronTrigger oldtrigger = (CronTrigger) clusterScheduler.getTrigger(TriggerKey.triggerKey(triggerName+"_trigger", triggerName+"_trigger_group"));
            TriggerBuilder<CronTrigger> tb = oldtrigger.getTriggerBuilder();
            Trigger newTrigger = tb.withSchedule(CronScheduleBuilder.cronSchedule(cron)).build();
            
            clusterScheduler.rescheduleJob(oldtrigger.getKey(), newTrigger);
            return true;
        } catch (Exception e) {
            logger.info("修改定觸發器失敗................");
            e.printStackTrace();
            return false;
        }
    }
}

**5. 提供一個我實現好的job：

實現一個job很簡單，只需實現org.quartz.Job介面即可，org.quartz.Job介面只有一個
execute()方法。這個方法就是定時任務執行時呼叫的方法，這裡就是我們業務程式碼的入口。
因為job需要持久化，所以也必須實現Serializable類。由於quartz的bean是由自己管理的沒有交友spring ioc管理，所以無法通過類似@Autowired這樣的註解注入bean。但是我們在springContext-quartz.xml中配置了applicationContextSchedulerContextKey，就可以通過execute 方法的JobExecutionContext引數獲取到ApplicationContext，那麼也就可以同bean name拿到bea了

package com.fotic.management.sms.job;

import java.io.Serializable;

import org.quartz.Job;
import org.quartz.JobExecutionContext;
import org.quartz.JobExecutionException;
import org.quartz.SchedulerContext;
import org.quartz.SchedulerException;
import org.springframework.context.ApplicationContext;
import org.springframework.stereotype.Service;

import com.fotic.management.sms.service.impl.SmsServiceImpl;

/*
* @Description: 定期向簡訊平臺推送資料
* @author dgq 
* @date 2018年4月25日
*/
@Service
public class PushOverdueDataJob implements Job, Serializable{
    private static final long serialVersionUID = -6605766126594260962L;
    @Override
    public void execute(JobExecutionContext context) throws JobExecutionException {
        try {
            SchedulerContext schedulerContext = context.getScheduler().getContext();
            ApplicationContext applicationContext = (ApplicationContext) schedulerContext.get("applicationContext");
            SmsServiceImpl ss = (SmsServiceImpl)applicationContext.getBean("smsServiceImpl");//獲取spring bean例項 
            ss.sendSms();
        } catch (SchedulerException e) {
            e.printStackTrace();
        }
    }
}

結尾
專案打包叢集部署就可以看到同一個job並不會在兩個伺服器中同時被觸發。我這裡在本地用
Apache搭建了一個簡單的叢集，測試沒問，這裡就不提供Apache叢集的搭建程式碼了。核心程式碼都在上面了，以此記錄。

spring整合quartz的叢集配置例項
2016-06-27
Springquartz
叢集例項：配置ISCSI客戶端(LINUX)
2013-11-27
客戶端Linux
redis偽叢集配置Cluster叢集模式
2019-04-09
Redis模式
Kafka叢集配置
2019-02-22
Kafka
mongo 叢集配置
2017-12-05
Go
MySQL叢集配置
2015-04-30
MySql
ActiveMQ+ZooKeeper 叢集整合
2019-01-19
MQ
Docker Elasticsearch 叢集配置
2021-02-25
DockerElasticsearch
MySQL叢集配置(轉)
2007-08-15
MySql
ActiveMQ+ZooKeeper 偽叢集整合
2021-09-09
MQ
線上ES叢集引數配置引起的業務異常案例分析
2023-11-23
#Tomcat學習(3)#Tomcat多例項配置和反向代理叢集配置
2020-10-22
Tomcat
Redis叢集案例與場景分析
2019-02-27
Redis
HA叢集heartbeat配置--Nginx
2016-10-18
Nginx
FastDFS 叢集安裝配置
2017-11-01
AST
xCAT叢集管理配置工具
2011-05-14
【Mongodb】Sharding 叢集配置
2011-11-03
MongoDB
39_配置redis叢集
2024-03-13
Redis
es 叢集配置推薦
2024-11-18
hadoop叢集搭建配置檔案優化引數
2015-09-11
Hadoop優化
Linux 叢集化
2020-12-20
Linux
大資料專案實踐（一）——之HDFS叢集配置
2018-08-21
大資料
cephadm訪問ceph叢集的方式及管理員節點配置案例
2024-08-22
Spring Boot整合Redis叢集（Cluster模式）
2021-08-30
Spring BootRedis模式
smartroute簡單整合叢集聊天通訊
2015-08-26
使用Ansible為叢集初始化並配置免密
2024-10-14
linux 怎麼配置叢集
2020-04-20
Linux
spark叢集的配置檔案
2020-12-05
Spark
docker 配置 Mysql主從叢集
2023-04-14
DockerMySql
Vert.x 叢集配置 TCP
2017-12-13
TCP
redis sentinel 叢集監控配置
2016-06-01
Redis
weblogic8.1叢集配置
2008-08-21
Web
Weblogic10 叢集配置
2011-06-07
Web
mysql-mmm叢集（多例項）薦
2013-06-29
MySql
叢集的應用例項(zt)
2007-10-24
叢集寫效能優化
2020-03-04
優化
叢集讀效能優化
2020-03-08
優化
Elastic Search 7.x 叢集配置
2020-05-16
AST

spring4.x 整合quartz2.x 叢集化配置專案例項

前言

具體實現

相關文章