使用mongodb作為Quartz.Net下的JobStore實現底層的持久化機制

一線碼農發表於2017-06-26
MongoDBquartz持久化

　　我們都知道預設的Quartz底層採用的是RAMJobStore，所有的Job,Trigger,Calendar都是用Dictionary,SortSet等等這樣的資料結構進行儲存，相對來說性

能肯定快的沒法說，但是面對災難重啟的時候還是很拿不出手的，而且都是全記憶體的，也沒法實現多機器搭建Quartz叢集，這一點還是很討厭，雖然官方已經

提供了一些關係性持久化儲存方案，但面對如今這麼火的nosql，不進行官方支援還是有點可惜，不過基於Quartz本身的插拔式設計，一切都不是問題。

 

一：IJobStore

　  從github上下載原始碼：https://github.com/quartznet/quartznet，從原始碼你會發現IJobStore幾乎實現了所有對Trigger,Job和Scheduler所有的容器管理操作。

 

然後你可以看到它的幾個實現子類，全記憶體的RAMJobStore。

public class RAMJobStore: IJobStore
{
....
}

 

以及JobStoreSupport下的帶鎖JobStoreTX和不帶鎖的JobStoreCMT。

public class JobStoreSupport: IJobStore
{
....
}

//帶鎖機制
public class JobStoreTX: JobStoreSupport
{
....
}

//不帶鎖
public class JobStoreCMT: JobStoreSupport
{
....
}

 

所以你應該明白，本節課跟大家講到的Redis和Mongodb的JobStore儲存，必然也是實現了IJobStore介面，對吧。

 

二：MongoDB的JobStore

1. 安裝mongodb

     既然要使用mongodb，你必然要有mongodb的安裝程式，可以去官網： wget https://fastdl.mongodb.org/linux/mongodb-linux-x86_64-3.4.5.tgz 一下，

這裡我採用linux平臺的centos。

 

2. nuget上pull些dll

    大家可以在nuget控制檯執行Install-Package Quartz.Spi.MongoDbJobStore，如下所示：

PM> Install-Package Quartz.Spi.MongoDbJobStore
正在嘗試收集與目標為“.NETFramework,Version=v4.5.2”的專案“ConsoleApplication1”有關的包“Quartz.Spi.MongoDbJobStore.2.0.0”的依賴項資訊
正在嘗試解析程式包“Quartz.Spi.MongoDbJobStore.2.0.0”的依賴項，DependencyBehavior 為“Lowest”
正在解析操作以安裝程式包“Quartz.Spi.MongoDbJobStore.2.0.0”
已解析操作以安裝程式包“Quartz.Spi.MongoDbJobStore.2.0.0”
正在將程式包“Common.Logging.Core.3.3.1”新增到資料夾“C:\1\ConsoleApplication1\packages”
已將程式包“Common.Logging.Core.3.3.1”新增到資料夾“C:\1\ConsoleApplication1\packages”
已將程式包“Common.Logging.Core.3.3.1”新增到“packages.config”
已將“Common.Logging.Core 3.3.1”成功安裝到 ConsoleApplication1
正在將程式包“Common.Logging.3.3.1”新增到資料夾“C:\1\ConsoleApplication1\packages”
已將程式包“Common.Logging.3.3.1”新增到資料夾“C:\1\ConsoleApplication1\packages”
已將程式包“Common.Logging.3.3.1”新增到“packages.config”
已將“Common.Logging 3.3.1”成功安裝到 ConsoleApplication1
正在將程式包“MongoDB.Bson.2.4.2”新增到資料夾“C:\1\ConsoleApplication1\packages”
已將程式包“MongoDB.Bson.2.4.2”新增到資料夾“C:\1\ConsoleApplication1\packages”
已將程式包“MongoDB.Bson.2.4.2”新增到“packages.config”
已將“MongoDB.Bson 2.4.2”成功安裝到 ConsoleApplication1
正在將程式包“Quartz.2.4.1”新增到資料夾“C:\1\ConsoleApplication1\packages”
已將程式包“Quartz.2.4.1”新增到資料夾“C:\1\ConsoleApplication1\packages”
已將程式包“Quartz.2.4.1”新增到“packages.config”
已將“Quartz 2.4.1”成功安裝到 ConsoleApplication1
正在將程式包“System.Runtime.InteropServices.RuntimeInformation.4.3.0”新增到資料夾“C:\1\ConsoleApplication1\packages”
已將程式包“System.Runtime.InteropServices.RuntimeInformation.4.3.0”新增到資料夾“C:\1\ConsoleApplication1\packages”
已將程式包“System.Runtime.InteropServices.RuntimeInformation.4.3.0”新增到“packages.config”
已將“System.Runtime.InteropServices.RuntimeInformation 4.3.0”成功安裝到 ConsoleApplication1
正在將程式包“MongoDB.Driver.Core.2.4.2”新增到資料夾“C:\1\ConsoleApplication1\packages”
已將程式包“MongoDB.Driver.Core.2.4.2”新增到資料夾“C:\1\ConsoleApplication1\packages”
已將程式包“MongoDB.Driver.Core.2.4.2”新增到“packages.config”
已將“MongoDB.Driver.Core 2.4.2”成功安裝到 ConsoleApplication1
正在將程式包“MongoDB.Driver.2.4.2”新增到資料夾“C:\1\ConsoleApplication1\packages”
已將程式包“MongoDB.Driver.2.4.2”新增到資料夾“C:\1\ConsoleApplication1\packages”
已將程式包“MongoDB.Driver.2.4.2”新增到“packages.config”
已將“MongoDB.Driver 2.4.2”成功安裝到 ConsoleApplication1
正在將程式包“Quartz.Spi.MongoDbJobStore.2.0.0”新增到資料夾“C:\1\ConsoleApplication1\packages”
已將程式包“Quartz.Spi.MongoDbJobStore.2.0.0”新增到資料夾“C:\1\ConsoleApplication1\packages”
已將程式包“Quartz.Spi.MongoDbJobStore.2.0.0”新增到“packages.config”
已將“Quartz.Spi.MongoDbJobStore 2.0.0”成功安裝到 ConsoleApplication1

 

也可以到github中下載原始碼：https://github.com/chrisdrobison/mongodb-quartz-net

 

3. 啟動執行

    然後可以看一下此頁面上的Basic Usage##上的預設配置：

 1 var properties = new NameValueCollection();
 2 properties[StdSchedulerFactory.PropertySchedulerInstanceName] = instanceName;
 3 properties[StdSchedulerFactory.PropertySchedulerInstanceId] = $"{Environment.MachineName}-{Guid.NewGuid()}";
 4 properties[StdSchedulerFactory.PropertyJobStoreType] = typeof (MongoDbJobStore).AssemblyQualifiedName;
 5 // I treat the database in the connection string as the one you want to connect to
 6 properties[$"{StdSchedulerFactory.PropertyJobStorePrefix}.{StdSchedulerFactory.PropertyDataSourceConnectionString}"] = "mongodb://localhost/quartz";
 7 // The prefix is optional
 8 properties[$"{StdSchedulerFactory.PropertyJobStorePrefix}.collectionPrefix"] = "prefix";
 9 
10 var scheduler = new StdSchedulerFactory(properties);
11 return scheduler.GetScheduler();

 

 <1>  PropertySchedulerInstanceName： 就是對Scheduler的Name進行的配置，大家可以根據情況定義一個簡明釋義的名字。

 <2> PropertySchedulerInstanceId： 可以看到這個項採用的是machineName+NewGuid來保證Scheduler容器的SchedulerID唯一，唯一性特別重要，因為在

　　　　　　　　　　　　　　　　 Cluster 中就是用它來保證唯一性的,不過上面的程式碼有點累贅，其實只要寫上“AUTO”就可以了，由底層的

　　　　　　　　　　　　               SimpleInstanceIdGenerator來保證uniqueID的生成，如StdSchedulerFactory.Instantiate方法原始碼所示：

 1             if (schedInstId.Equals(AutoGenerateInstanceId))
 2             {
 3                 autoId = true;
 4                 instanceIdGeneratorType = LoadType(cfg.GetStringProperty(PropertySchedulerInstanceIdGeneratorType)) ?? typeof(SimpleInstanceIdGenerator);
 5             }
 6             else if (schedInstId.Equals(SystemPropertyAsInstanceId))
 7             {
 8                 autoId = true;
 9                 instanceIdGeneratorType = typeof(SystemPropertyInstanceIdGenerator);
10             }

 

<3> PropertyJobStoreType：這個屬性將MongoDbJobStore作為底層的IJobStore實現者。

<4> PropertyDataSourceConnectionString,collectionPrefix： 這兩個沒什麼好說的，一個是mongodb的connectionstring，一個是collection的字首。

 

好了，下面就是我的完整程式碼：

 1         static void Main(string[] args)
 2         {
 3 
 4             LogManager.Adapter = new Common.Logging.Simple.TraceLoggerFactoryAdapter()
 5             {
 6                 Level = LogLevel.All
 7             };
 8 
 9             var properties = new NameValueCollection();
10             properties[StdSchedulerFactory.PropertySchedulerInstanceId] = "AUTO";
11             properties[StdSchedulerFactory.PropertyJobStoreType] = typeof(MongoDbJobStore).AssemblyQualifiedName;
12 
13             // I treat the database in the connection string as the one you want to connect to
14             properties[$"{StdSchedulerFactory.PropertyJobStorePrefix}.{StdSchedulerFactory.PropertyDataSourceConnectionString}"] = "mongodb://192.168.23.163/quartz";
15 
16             // The prefix is optional
17             properties[$"{StdSchedulerFactory.PropertyJobStorePrefix}.collectionPrefix"] = "prefix";
18 
19             var factory = new StdSchedulerFactory(properties);
20 
21             //scheduler
22             IScheduler scheduler = factory.GetScheduler();
23 
24             scheduler.Start();
25 
26             var job = JobBuilder.Create<HelloJob>().WithIdentity("test", "datamip").Build();
27 
28             var trigger = TriggerBuilder.Create().WithCronSchedule("* * * * * ?").Build();
29 
30             if (!scheduler.CheckExists(job.Key))
31             {
32                 scheduler.ScheduleJob(job, trigger);
33             }
34 
35             Console.Read();
36         }

 

這個我自定義的HelloJob中，我特意記錄一下scheduler的排程時間schedulertime和Trigger應該觸發的時間nextFireTime。

 1     class HelloJob : IJob
 2     {
 3         static int index = 1;
 4 
 5         public void Execute(IJobExecutionContext context)
 6         {
 7             Console.WriteLine("{4} index={0},current={1}, scheuler={2},nexttime={3}",
 8                                             index++, DateTime.Now,
 9                                             context.ScheduledFireTimeUtc?.LocalDateTime,
10                                             context.NextFireTimeUtc?.LocalDateTime,
11                                             context.JobDetail.JobDataMap["key"]);
12         }
13     }

 

接下來執行一下：

 

然後通過robomongo到資料庫看一下，有5個collection，裡面都有資料，沒毛病。

 

好了，本篇就說到這裡了，當然還有基於redis的JobStore，有興趣大家可以自己嘗試一下。

 

相關文章