使用mongodb作为Quartz.Net下的JobStore实现底层的持久化机制

  我们都知道默认的Quartz底层采用的是RAMJobStore,所有的Job,Trigger,Calendar都是用Dictionary,SortSet等等这样的数据结构进行储存,相对来说性

能肯定快的没法说,但是面对灾难重启的时候还是很拿不出手的,而且都是全内存的,也没法实现多机器搭建Quartz集群,这一点还是很讨厌,虽然官方已经

提供了一些关系性持久化存储方案,但面对如今这么火的nosql,不进行官方支持还是有点可惜,不过基于Quartz本身的插拔式设计,一切都不是问题。

一:IJobStore

   从github上下载源码:https://github.com/quartznet/quartznet,从源码你会发现IJobStore几乎实现了所有对Trigger,Job和Scheduler所有的容器管理操作。

然后你可以看到它的几个实现子类,全内存的RAMJobStore。

public class RAMJobStore: IJobStore
{
....
}

以及JobStoreSupport下的带锁JobStoreTX和不带锁的JobStoreCMT。

public class JobStoreSupport: IJobStore
{
....
}

//带锁机制
public class JobStoreTX: JobStoreSupport
{
....
}

//不带锁
public class JobStoreCMT: JobStoreSupport
{
....
}

所以你应该明白,本节课跟大家讲到的Redis和Mongodb的JobStore存储,必然也是实现了IJobStore接口,对吧。

二:MongoDB的JobStore

1. 安装mongodb

既然要使用mongodb,你必然要有mongodb的安装程序,可以去官网: wget https://fastdl.mongodb.org/linux/mongodb-linux-x86_64-3.4.5.tgz 一下,

这里我采用linux平台的centos。

2. nuget上pull些dll

大家可以在nuget控制台执行Install-Package Quartz.Spi.MongoDbJobStore,如下所示:

PM> Install-Package Quartz.Spi.MongoDbJobStore
正在尝试收集与目标为“.NETFramework,Version=v4.5.2”的项目“ConsoleApplication1”有关的包“Quartz.Spi.MongoDbJobStore.2.0.0”的依赖项信息
正在尝试解析程序包“Quartz.Spi.MongoDbJobStore.2.0.0”的依赖项,DependencyBehavior 为“Lowest”
正在解析操作以安装程序包“Quartz.Spi.MongoDbJobStore.2.0.0”
已解析操作以安装程序包“Quartz.Spi.MongoDbJobStore.2.0.0”
正在将程序包“Common.Logging.Core.3.3.1”添加到文件夹“C:\1\ConsoleApplication1\packages”
已将程序包“Common.Logging.Core.3.3.1”添加到文件夹“C:\1\ConsoleApplication1\packages”
已将程序包“Common.Logging.Core.3.3.1”添加到“packages.config”
已将“Common.Logging.Core 3.3.1”成功安装到 ConsoleApplication1
正在将程序包“Common.Logging.3.3.1”添加到文件夹“C:\1\ConsoleApplication1\packages”
已将程序包“Common.Logging.3.3.1”添加到文件夹“C:\1\ConsoleApplication1\packages”
已将程序包“Common.Logging.3.3.1”添加到“packages.config”
已将“Common.Logging 3.3.1”成功安装到 ConsoleApplication1
正在将程序包“MongoDB.Bson.2.4.2”添加到文件夹“C:\1\ConsoleApplication1\packages”
已将程序包“MongoDB.Bson.2.4.2”添加到文件夹“C:\1\ConsoleApplication1\packages”
已将程序包“MongoDB.Bson.2.4.2”添加到“packages.config”
已将“MongoDB.Bson 2.4.2”成功安装到 ConsoleApplication1
正在将程序包“Quartz.2.4.1”添加到文件夹“C:\1\ConsoleApplication1\packages”
已将程序包“Quartz.2.4.1”添加到文件夹“C:\1\ConsoleApplication1\packages”
已将程序包“Quartz.2.4.1”添加到“packages.config”
已将“Quartz 2.4.1”成功安装到 ConsoleApplication1
正在将程序包“System.Runtime.InteropServices.RuntimeInformation.4.3.0”添加到文件夹“C:\1\ConsoleApplication1\packages”
已将程序包“System.Runtime.InteropServices.RuntimeInformation.4.3.0”添加到文件夹“C:\1\ConsoleApplication1\packages”
已将程序包“System.Runtime.InteropServices.RuntimeInformation.4.3.0”添加到“packages.config”
已将“System.Runtime.InteropServices.RuntimeInformation 4.3.0”成功安装到 ConsoleApplication1
正在将程序包“MongoDB.Driver.Core.2.4.2”添加到文件夹“C:\1\ConsoleApplication1\packages”
已将程序包“MongoDB.Driver.Core.2.4.2”添加到文件夹“C:\1\ConsoleApplication1\packages”
已将程序包“MongoDB.Driver.Core.2.4.2”添加到“packages.config”
已将“MongoDB.Driver.Core 2.4.2”成功安装到 ConsoleApplication1
正在将程序包“MongoDB.Driver.2.4.2”添加到文件夹“C:\1\ConsoleApplication1\packages”
已将程序包“MongoDB.Driver.2.4.2”添加到文件夹“C:\1\ConsoleApplication1\packages”
已将程序包“MongoDB.Driver.2.4.2”添加到“packages.config”
已将“MongoDB.Driver 2.4.2”成功安装到 ConsoleApplication1
正在将程序包“Quartz.Spi.MongoDbJobStore.2.0.0”添加到文件夹“C:\1\ConsoleApplication1\packages”
已将程序包“Quartz.Spi.MongoDbJobStore.2.0.0”添加到文件夹“C:\1\ConsoleApplication1\packages”
已将程序包“Quartz.Spi.MongoDbJobStore.2.0.0”添加到“packages.config”
已将“Quartz.Spi.MongoDbJobStore 2.0.0”成功安装到 ConsoleApplication1

也可以到github中下载源码:https://github.com/chrisdrobison/mongodb-quartz-net

3. 启动运行

然后可以看一下此页面上的Basic Usage##上的默认配置:

 1 var properties = new NameValueCollection();
 2 properties[StdSchedulerFactory.PropertySchedulerInstanceName] = instanceName;
 3 properties[StdSchedulerFactory.PropertySchedulerInstanceId] = $"{Environment.MachineName}-{Guid.NewGuid()}";
 4 properties[StdSchedulerFactory.PropertyJobStoreType] = typeof (MongoDbJobStore).AssemblyQualifiedName;
 5 // I treat the database in the connection string as the one you want to connect to
 6 properties[$"{StdSchedulerFactory.PropertyJobStorePrefix}.{StdSchedulerFactory.PropertyDataSourceConnectionString}"] = "mongodb://localhost/quartz";
 7 // The prefix is optional
 8 properties[$"{StdSchedulerFactory.PropertyJobStorePrefix}.collectionPrefix"] = "prefix";
 9
10 var scheduler = new StdSchedulerFactory(properties);
11 return scheduler.GetScheduler();

<1>  PropertySchedulerInstanceName: 就是对Scheduler的Name进行的配置,大家可以根据情况定义一个简明释义的名字。

<2> PropertySchedulerInstanceId: 可以看到这个项采用的是machineName+NewGuid来保证Scheduler容器的SchedulerID唯一,唯一性特别重要,因为在

                 Cluster 中就是用它来保证唯一性的,不过上面的代码有点累赘,其实只要写上“AUTO”就可以了,由底层的

                           SimpleInstanceIdGenerator来保证uniqueID的生成,如StdSchedulerFactory.Instantiate方法源码所示:

 1             if (schedInstId.Equals(AutoGenerateInstanceId))
 2             {
 3                 autoId = true;
 4                 instanceIdGeneratorType = LoadType(cfg.GetStringProperty(PropertySchedulerInstanceIdGeneratorType)) ?? typeof(SimpleInstanceIdGenerator);
 5             }
 6             else if (schedInstId.Equals(SystemPropertyAsInstanceId))
 7             {
 8                 autoId = true;
 9                 instanceIdGeneratorType = typeof(SystemPropertyInstanceIdGenerator);
10             }

<3> PropertyJobStoreType:这个属性将MongoDbJobStore作为底层的IJobStore实现者。

<4> PropertyDataSourceConnectionString,collectionPrefix: 这两个没什么好说的,一个是mongodb的connectionstring,一个是collection的前缀。

好了,下面就是我的完整代码:

 1         static void Main(string[] args)
 2         {
 3
 4             LogManager.Adapter = new Common.Logging.Simple.TraceLoggerFactoryAdapter()
 5             {
 6                 Level = LogLevel.All
 7             };
 8
 9             var properties = new NameValueCollection();
10             properties[StdSchedulerFactory.PropertySchedulerInstanceId] = "AUTO";
11             properties[StdSchedulerFactory.PropertyJobStoreType] = typeof(MongoDbJobStore).AssemblyQualifiedName;
12
13             // I treat the database in the connection string as the one you want to connect to
14             properties[$"{StdSchedulerFactory.PropertyJobStorePrefix}.{StdSchedulerFactory.PropertyDataSourceConnectionString}"] = "mongodb://192.168.23.163/quartz";
15
16             // The prefix is optional
17             properties[$"{StdSchedulerFactory.PropertyJobStorePrefix}.collectionPrefix"] = "prefix";
18
19             var factory = new StdSchedulerFactory(properties);
20
21             //scheduler
22             IScheduler scheduler = factory.GetScheduler();
23
24             scheduler.Start();
25
26             var job = JobBuilder.Create<HelloJob>().WithIdentity("test", "datamip").Build();
27
28             var trigger = TriggerBuilder.Create().WithCronSchedule("* * * * * ?").Build();
29
30             if (!scheduler.CheckExists(job.Key))
31             {
32                 scheduler.ScheduleJob(job, trigger);
33             }
34
35             Console.Read();
36         }

这个我自定义的HelloJob中,我特意记录一下scheduler的调度时间schedulertime和Trigger应该触发的时间nextFireTime。

 1     class HelloJob : IJob
 2     {
 3         static int index = 1;
 4
 5         public void Execute(IJobExecutionContext context)
 6         {
 7             Console.WriteLine("{4} index={0},current={1}, scheuler={2},nexttime={3}",
 8                                             index++, DateTime.Now,
 9                                             context.ScheduledFireTimeUtc?.LocalDateTime,
10                                             context.NextFireTimeUtc?.LocalDateTime,
11                                             context.JobDetail.JobDataMap["key"]);
12         }
13     }

接下来执行一下:

然后通过robomongo到数据库看一下,有5个collection,里面都有数据,没毛病。

好了,本篇就说到这里了,当然还有基于redis的JobStore,有兴趣大家可以自己尝试一下。

时间: 2024-10-29 11:02:59

使用mongodb作为Quartz.Net下的JobStore实现底层的持久化机制的相关文章

Quartz.net 3.x使用总结(二)——Db持久化和集群

上一篇简单介绍了Quartz.net的概念和基本用法,这一篇记录一下Quartz.net通过数据库持久化Trigger和Jobs等数据,并简单配置Quartz.net的集群. 1.JobStore介绍 学习持久化和集群前我们先了解一下Quartz.net中的JobStore,JobStore用于追踪任务调度相关的所有数据,如Job,Trigger,Claendar等.Quartz.net 提供了两种JobStore:RAMJobStore,AdoJobStore. RAMJobStore RAM

Linux下的动态连接库及其实现机制

Linux与Windows的动态连接库概念相似,但是实现机制不同.它引入了GOT表和PLT表的概念,综合使用了多种重定位项,实现了"浮动代码",达到了更好的共享性能.本文对这些技术逐一进行了详细讨论. 本文着重讨论x86体系结构,这是因为 (1)运行Linux的各种体系结构中,以x86最为普及: (2)该体系结构上的Windows操作系统广为人知,由此可以较容易的理解Linux的类似概念: 下表列出了Windows与Linux的近义词,文中将不加以区分: Windows Linux 动

MongoDB介绍与windows下安装

MongoDB是一个介于关系数据库和非关系数据库之间的产品,是非关系数据库当中功能最丰富,最像关系数据库的.他支持的数据结构非常松散,是类 似json的bjson格式,因此可以存储比较复杂的数据类型.Mongo最大的特点是他支持的查询语言非常强大,其语法有点类似于面向对象的查询语言, 几乎可以实现类似关系数据库单表查询的绝大部分功能,而且还支持对数据建立索引. 它的特点是高性能.易部署.易使用,存储数据非常方便.主要功能特性有: 面向集合存储,易存储对象类型的数据. 模式自由. 支持动态查询.

Mongodb在Windows 7下的安装及配置

第一步 下载MongoDB: 下载mongodb的windows版本,有32位和64位版本,根据操作系统情况下载,下载地址:http://www.mongodb.org/downloads 解压缩至指定目录即可,如 E:/mongodb. 第二步 创建dbpath: 启动mongodb服务之前需要必须创建数据库文件的存放文件夹,否则命令不会自动创建,而且不能启动成功. 创建数据库文件的存放位置,如 E:/mongodb/data/db(即在E:/mongodb下创建相应的文件夹). 默认文件夹路

MongoDB在Windows系统下的安装和启动

版本选择MongoDB的版本命名规范如:x.y.z: y为奇数时表示当前版本为开发版,如:2.3.0.2.1.1: y为偶数时表示当前版本为稳定版,如:2.0.1.2.2.0: 目前官网上最新的版本为3.4.6平台选择 生产环境使用32位机器的数据限制2G,在64位机器上坚决要使用64位版本,可以获得更大的内存映射空间,提升MongoDB的性能: 至于操作系统,MongoDB是跨平台的,在下载页面找自己对应的版本即可. Windows平台的安装 到MongoDB官网下载对应版本的安装包: htt

Mongodb在Ubuntu环境下的安装(以mongodb3.2为例)

软件的下载这里就不说了,最好是下载官方版本.. //解压 sudo tar -zxvf /usr/test/soft/mongodb-linux-x86_64-ubuntu1404-3.2.6.tgz -C /usr/test //移动 sudo mv /usr/test/mongodb-linux-x86_64-ubuntu1404-3.2.6 /usr/test/mongodb3.2 //新建目录 mkdir -p /usr/test/mongodb3.2/data/db    //db目录

mongodb的安装(linux下)

1.去官网下载安装包 2.解压tar包 tar -zxvf filename 3.移动路径,并进入路径 mv mongodb-linux-x86_64-3.0.6/ /usr/local/mongodb 4.配置环境变量 export PATH=/usr/local/mongodb/bin:$PATH 5.创建数据库默认启动目录 mkdir -p /data/db 6.启动server ./mongod 7.启动client,并连接本地mongodb server ./mongo mongodb

mongoDB 在windows平台下安装成系统服务

1,用如截图所示命令将mongoDB安装成windows系统服务,byRuiy Tips[Note,logpath and dbpath根据你命令行指导的路径,这些目录一定要已经创建] 2,基于cmd 启动mongodb 3,mongoDB创建用户,并auth认证,此操作切记的就是需先切换到admin库再干[Ruiy Tips,MongoDB用户密码破解] 但直接启动mongoDB 无--auth,直接指向需破解的--dbpath进去后切换到admin库,直接执行db.addUser("Ruiy

PHP操作MongoDB打模块 linux下,详细截图介绍(七)