设为首页收藏本站
开启辅助访问

SpringBoot+Quartz+数据库存储（定时任务调度）

 您所在的位置：网站首页 › scheduler怎么读 › SpringBoot+Quartz+数据库存储（定时任务调度）

SpringBoot+Quartz+数据库存储（定时任务调度）

2023-11-13 11:16| 来源: 网络整理| 查看: 265

SpringBoot+Quartz+数据库存储（定时任务调度） Spring整合Quartz读取数据库中表达式启动定时任务1（每5s执行）更改定时任务状态（启用/禁用）定时任务中携带参数更改定时任务规则(并接收传输的参数)

Spring整合Quartz

项目创建所需勾选依赖

在这里插入图片描述

quartz调度框架是有内置表的

本章所需数据库脚本下载 提取码：hrnj

进入quartz的官网http://www.quartz-scheduler.org/，点击Downloads， 下载后在目录\docs\dbTables下有常用数据库创建quartz表的脚本，例如：“tables_mysql.sql”

在这里插入图片描述

运行完，自动生成的表格

在这里插入图片描述 导入所需pom.xml依赖文件

quartz需要使用C3P0连接池将数据持久化到数据库 Quartz各版本数据库连接池技术更新情况 Quartz 2.0 以前 DBCP Quartz 2.0 以后 C3P0（包含2.0） 需要更换成Druid连接池

mysql mysql-connector-java ${mysql.version} runtime com.alibaba druid-spring-boot-starter 1.1.10 org.quartz-scheduler quartz-jobs 2.2.1 src/main/java **/*.xml src/main/resources *.properties *.xml *.yml org.mybatis.generator mybatis-generator-maven-plugin 1.3.2 mysql mysql-connector-java ${mysql.version} true

在这里插入图片描述 在这里插入图片描述

在项目中添加quartz.properties文件(这样就不会加载自带的properties文件) 此文件的内容主要分为：scheduler，ThreadPool，JobStore，plugin，Datasources等部分， 覆盖properties文件的目的是覆盖默认的数据源，更换为druid的数据配置

quartz.properties

# #============================================================================ # Configure Main Scheduler Properties 调度器属性 #============================================================================ org.quartz.scheduler.instanceName: DefaultQuartzScheduler org.quartz.scheduler.instanceId = AUTO org.quartz.scheduler.rmi.export: false org.quartz.scheduler.rmi.proxy: false org.quartz.scheduler.wrapJobExecutionInUserTransaction: false org.quartz.threadPool.class: org.quartz.simpl.SimpleThreadPool org.quartz.threadPool.threadCount= 10 org.quartz.threadPool.threadPriority: 5 org.quartz.threadPool.threadsInheritContextClassLoaderOfInitializingThread: true org.quartz.jobStore.misfireThreshold: 60000 #============================================================================ # Configure JobStore #============================================================================ #存储方式使用JobStoreTX，也就是数据库 org.quartz.jobStore.class: org.quartz.impl.jdbcjobstore.JobStoreTX org.quartz.jobStore.driverDelegateClass:org.quartz.impl.jdbcjobstore.StdJDBCDelegate #使用自己的配置文件 org.quartz.jobStore.useProperties:true #数据库中quartz表的表名前缀 org.quartz.jobStore.tablePrefix:qrtz_ org.quartz.jobStore.dataSource:qzDS #是否使用集群（如果项目只部署到 一台服务器，就不用了） org.quartz.jobStore.isClustered = true #============================================================================ # Configure Datasources #============================================================================ #配置数据库源（org.quartz.dataSource.qzDS.maxConnections: c3p0配置的是有s的，druid数据源没有s） org.quartz.dataSource.qzDS.connectionProvider.class:com.tanle.quartz02.utils.DruidConnectionProvider org.quartz.dataSource.qzDS.driver: com.mysql.jdbc.Driver org.quartz.dataSource.qzDS.URL: jdbc:mysql://localhost:3306/tanle?useUnicode=true&characterEncoding=utf8 org.quartz.dataSource.qzDS.user: root org.quartz.dataSource.qzDS.password: org.quartz.dataSource.qzDS.maxConnection: 10

自定义MyJobFactory，解决spring不能在quartz中注入bean的问题

package com.tanle.quartz02.utils; import lombok.extern.slf4j.Slf4j; import org.quartz.spi.TriggerFiredBundle; import org.springframework.beans.factory.annotation.Autowired; import org.springframework.beans.factory.config.AutowireCapableBeanFactory; import org.springframework.scheduling.quartz.AdaptableJobFactory; import org.springframework.stereotype.Component; @Component @Slf4j public class MyJobFactory extends AdaptableJobFactory { //这个对象Spring会帮我们自动注入进来 @Autowired private AutowireCapableBeanFactory autowireCapableBeanFactory; //重写创建Job任务的实例方法 @Override protected Object createJobInstance(TriggerFiredBundle bundle) throws Exception { Object jobInstance = super.createJobInstance(bundle); //通过以下方式，解决Job任务无法使用Spring中的Bean问题 autowireCapableBeanFactory.autowireBean(jobInstance); return super.createJobInstance(bundle); } }

要搞清楚一个问题：从数据库读取任务信息动态生成定时任务，和把quartz持久化到数据库是没有关系的。前者是我们自己定义的业务表，而后者是quartz使用自己的表来存储信息。持久化到数据库后，就算服务器重启或是多个quartz节点也没关系，因为他们共享数据库中的任务信息。

自定义的业务表

-- 注意：job_name存放的任务类的全路径，在quartz中通过jobName和jobGroup来确定trigger的唯一性，所以这两列为联合唯一索引 create table t_schedule_trigger ( id int primary key auto_increment, -- ID cron varchar(200) not null, -- 时间表达式 status char(1) not null, -- 使用状态 0：禁用 1：启用 job_name varchar(200) not null, -- 任务名称 job_group varchar(200) not null, -- 任务分组 unique index(job_name,job_group) ); -- 额外添加到任务中的参数 create table t_schedule_trigger_param ( param_id int primary key auto_increment, -- ID name varchar(200) not null, -- 参数名 value varchar(512), -- 参数值 schedule_trigger_id int not null, -- 外键：引用t_schedule_trigger(id) foreign key(schedule_trigger_id) references t_schedule_trigger(id) );

在这里插入图片描述

创建DruidConnectionProvider

package com.tanle.quartz02.utils; import com.alibaba.druid.pool.DruidDataSource; import org.quartz.SchedulerException; import org.quartz.utils.ConnectionProvider; import java.sql.Connection; import java.sql.SQLException; /* #============================================================================ # JDBC #============================================================================ org.quartz.jobStore.driverDelegateClass:org.quartz.impl.jdbcjobstore.StdJDBCDelegate org.quartz.jobStore.useProperties:false org.quartz.jobStore.dataSource:qzDS #org.quartz.dataSource.qzDS.connectionProvider.class:org.quartz.utils.PoolingConnectionProvider org.quartz.dataSource.qzDS.connectionProvider.class:com.zking.q03.quartz.DruidConnectionProvider org.quartz.dataSource.qzDS.driver:com.mysql.jdbc.Driver org.quartz.dataSource.qzDS.URL:jdbc:mysql://127.0.0.1:3306/test?useUnicode=true&characterEncoding=UTF-8 org.quartz.dataSource.qzDS.user:root org.quartz.dataSource.qzDS.password:root org.quartz.dataSource.qzDS.maxConnections:30 org.quartz.dataSource.qzDS.validationQuery: select 0 */ /** * [Druid连接池的Quartz扩展类] * * @ProjectName: [] * @Author: [xuguang] * @CreateDate: [2015/11/10 17:58] * @Update: [说明本次修改内容] BY[xuguang][2015/11/10] * @Version: [v1.0] */ public class DruidConnectionProvider implements ConnectionProvider { /* * ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~ * * 常量配置，与quartz.properties文件的key保持一致(去掉前缀)，同时提供set方法，Quartz框架自动注入值。 * * ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~ */ //JDBC驱动 public String driver; //JDBC连接串 public String URL; //数据库用户名 public String user; //数据库用户密码 public String password; //数据库最大连接数 public int maxConnection; //数据库SQL查询每次连接返回执行到连接池，以确保它仍然是有效的。 public String validationQuery; private boolean validateOnCheckout; private int idleConnectionValidationSeconds; public String maxCachedStatementsPerConnection; private String discardIdleConnectionsSeconds; public static final int DEFAULT_DB_MAX_CONNECTIONS = 10; public static final int DEFAULT_DB_MAX_CACHED_STATEMENTS_PER_CONNECTION = 120; //Druid连接池 private DruidDataSource datasource; /* * ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~ * * 接口实现 * * ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~ */ public Connection getConnection() throws SQLException { return datasource.getConnection(); } public void shutdown() throws SQLException { datasource.close(); } public void initialize() throws SQLException{ if (this.URL == null) { throw new SQLException("DBPool could not be created: DB URL cannot be null"); } if (this.driver == null) { throw new SQLException("DBPool driver could not be created: DB driver class name cannot be null!"); } if (this.maxConnection datasource.setDriverClassName(this.driver); } catch (Exception e) { try { throw new SchedulerException("Problem setting driver class name on datasource: " + e.getMessage(), e); } catch (SchedulerException e1) { } } datasource.setUrl(this.URL); datasource.setUsername(this.user); datasource.setPassword(this.password); datasource.setMaxActive(this.maxConnection); datasource.setMinIdle(1); datasource.setMaxWait(0); datasource.setMaxPoolPreparedStatementPerConnectionSize(this.DEFAULT_DB_MAX_CACHED_STATEMENTS_PER_CONNECTION); if (this.validationQuery != null) { datasource.setValidationQuery(this.validationQuery); if(!this.validateOnCheckout) datasource.setTestOnReturn(true); else datasource.setTestOnBorrow(true); datasource.setValidationQueryTimeout(this.idleConnectionValidationSeconds); } } /* * ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~ * * 提供get set方法 * * ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~ */ public String getDriver() { return driver; } public void setDriver(String driver) { this.driver = driver; } public String getURL() { return URL; } public void setURL(String URL) { this.URL = URL; } public String getUser() { return user; } public void setUser(String user) { this.user = user; } public String getPassword() { return password; } public void setPassword(String password) { this.password = password; } public int getMaxConnection() { return maxConnection; } public void setMaxConnection(int maxConnection) { this.maxConnection = maxConnection; } public String getValidationQuery() { return validationQuery; } public void setValidationQuery(String validationQuery) { this.validationQuery = validationQuery; } public boolean isValidateOnCheckout() { return validateOnCheckout; } public void setValidateOnCheckout(boolean validateOnCheckout) { this.validateOnCheckout = validateOnCheckout; } public int getIdleConnectionValidationSeconds() { return idleConnectionValidationSeconds; } public void setIdleConnectionValidationSeconds(int idleConnectionValidationSeconds) { this.idleConnectionValidationSeconds = idleConnectionValidationSeconds; } public DruidDataSource getDatasource() { return datasource; } public void setDatasource(DruidDataSource datasource) { this.datasource = datasource; } }

QuartzConfiguration.java（quartz调度框架与spring框架整合的配置类，主要是要将org.quartz.Scheduler交给spring进行管理）

package com.tanle.quartz02.config; import com.tanle.quartz02.utils.MyJobFactory; import org.quartz.Scheduler; import org.springframework.beans.factory.annotation.Autowired; import org.springframework.beans.factory.config.PropertiesFactoryBean; import org.springframework.context.annotation.Bean; import org.springframework.context.annotation.Configuration; import org.springframework.core.io.ClassPathResource; import org.springframework.scheduling.quartz.SchedulerFactoryBean; import java.io.IOException; import java.util.Properties; @Configuration public class QuartzConfiguration { @Autowired private MyJobFactory myJobFactory; //创建调度器工厂 @Bean public SchedulerFactoryBean schedulerFactoryBean(){ //1.创建SchedulerFactoryBean //2.加载自定义的quartz.properties配置文件 //3.设置MyJobFactory SchedulerFactoryBean factoryBean=new SchedulerFactoryBean(); try { factoryBean.setQuartzProperties(quartzProperties()); factoryBean.setJobFactory(myJobFactory); return factoryBean; } catch (IOException e) { throw new RuntimeException(e); } } @Bean public Properties quartzProperties() throws IOException { PropertiesFactoryBean propertiesFactoryBean=new PropertiesFactoryBean(); propertiesFactoryBean.setLocation(new ClassPathResource("/quartz.properties")); propertiesFactoryBean.afterPropertiesSet(); return propertiesFactoryBean.getObject(); } @Bean(name="scheduler") public Scheduler scheduler(){ return schedulerFactoryBean().getScheduler(); } }

在这里插入图片描述 在这里插入图片描述

application.yml

server: servlet: context-path: /quartz spring: datasource: #1.JDBC type: com.alibaba.druid.pool.DruidDataSource driver-class-name: com.mysql.jdbc.Driver url: jdbc:mysql://localhost:3306/tanle?useUnicode=true&characterEncoding=utf8 username: root password: druid: #2.连接池配置 #初始化连接池的连接数量 大小，最小，最大 initial-size: 5 min-idle: 5 max-active: 20 #配置获取连接等待超时的时间 max-wait: 60000 #配置间隔多久才进行一次检测，检测需要关闭的空闲连接，单位是毫秒 time-between-eviction-runs-millis: 60000 # 配置一个连接在池中最小生存的时间，单位是毫秒 min-evictable-idle-time-millis: 30000 validation-query: SELECT 1 FROM DUAL test-while-idle: true test-on-borrow: true test-on-return: false # 是否缓存preparedStatement，也就是PSCache 官方建议MySQL下建议关闭 个人建议如果想用SQL防火墙 建议打开 pool-prepared-statements: true max-pool-prepared-statement-per-connection-size: 20 # 配置监控统计拦截的filters，去掉后监控界面sql无法统计，'wall'用于防火墙 filter: stat: merge-sql: true slow-sql-millis: 5000 #3.基础监控配置 web-stat-filter: enabled: true url-pattern: /* #设置不统计哪些URL exclusions: "*.js,*.gif,*.jpg,*.png,*.css,*.ico,/druid/*" session-stat-enable: true session-stat-max-count: 100 stat-view-servlet: enabled: true url-pattern: /druid/* reset-enable: true #设置监控页面的登录名和密码 login-username: admin login-password: admin allow: 127.0.0.1 #deny: 192.168.1.100 #显示日志 logging: level: com.tanle.quartz02.mapper: debug

项目运行类加入注解 @MapperScan(“com.javaxl.quartz02.mapper”) @EnableTransactionManagement @EnableScheduling

在这里插入图片描述

其中用到mybatis的逆向生成

jdbc.properties

jdbc.driver=com.mysql.jdbc.Driver jdbc.url=jdbc:mysql://localhost:3306/tanle?useUnicode=true&characterEncoding=UTF-8 jdbc.username=root jdbc.password=

generatorConfig.xml

在这里插入图片描述

ScheduleTriggerMapper新增查询触发器中包含的所有任务

在这里插入图片描述

ScheduleTriggerMapper.xml

select from t_schedule_trigger

在这里插入图片描述

ScheduleTriggerParamMapper新增查询出当前任务类对应所需的参数

在这里插入图片描述

ScheduleTriggerParamMapper.xml

select from t_schedule_trigger_param where schedule_trigger_id=#{triggerId}

在这里插入图片描述

service层 ScheduleTriggerParamService

package com.tanle.quartz02.service; import com.tanle.quartz02.model.ScheduleTriggerParam; import java.util.List; /** * @author tanle * @site www.tanle.com * @company xxx公司 * @create 2020-12-07 19:42 */ public interface ScheduleTriggerParamService { public List queryScheduleParamLst(Integer triggerId); }

实现类 ScheduleTriggerParamServiceImpl

package com.tanle.quartz02.service.Impl; import com.tanle.quartz02.mapper.ScheduleTriggerParamMapper; import com.tanle.quartz02.model.ScheduleTriggerParam; import com.tanle.quartz02.service.ScheduleTriggerParamService; import org.springframework.beans.factory.annotation.Autowired; import org.springframework.stereotype.Service; import java.util.List; /** * @author tanle * @site www.tanle.com * @company xxx公司 * @create 2020-12-07 19:43 */ @Service public class ScheduleTriggerParamServiceImpl implements ScheduleTriggerParamService { @Autowired private ScheduleTriggerParamMapper scheduleTriggerParamMapper; @Override public List queryScheduleParamLst(Integer triggerId) { return scheduleTriggerParamMapper.queryScheduleParamLst(triggerId); } }

spring自带定时任务作业类ScheduleTriggerServiceImpl.java

package com.tanle.quartz02.service.Impl; import com.tanle.quartz02.mapper.ScheduleTriggerMapper; import com.tanle.quartz02.mapper.ScheduleTriggerParamMapper; import com.tanle.quartz02.model.ScheduleTrigger; import com.tanle.quartz02.model.ScheduleTriggerParam; import org.quartz.*; import org.springframework.beans.factory.annotation.Autowired; import org.springframework.scheduling.annotation.Scheduled; import org.springframework.stereotype.Service; import java.util.List; /** * @author tanle * @site www.tanle.com * @company xxx公司 * @create 2020-12-07 19:45 */ @Service public class ScheduleTriggerServiceImpl { @Autowired private ScheduleTriggerMapper scheduleTriggerMapper; @Autowired private ScheduleTriggerParamMapper scheduleTriggerParamMapper; @Autowired private Scheduler scheduler; @Scheduled(cron = "0/10 * * * * ?") public void refreshScheduler(){ try { List scheduleTriggers = scheduleTriggerMapper.queryScheduleTriggerLst(); if(null!=scheduleTriggers){ for (ScheduleTrigger scheduleTrigger : scheduleTriggers) { String cron = scheduleTrigger.getCron(); //表达式 String jobName = scheduleTrigger.getJob_name(); //任务名称 String jobGroup = scheduleTrigger.getJob_group(); //任务分组 String status = scheduleTrigger.getStatus(); //任务状态 //JobName+JobGroup=Primary Key //根据jobName和jobGroup生成TriggerKey TriggerKey triggerKey = TriggerKey.triggerKey(jobName, jobGroup); //根据TriggerKey到Scheduler调度器中获取触发器 CronTrigger cronTrigger = (CronTrigger) scheduler.getTrigger(triggerKey); if(null==cronTrigger){ if(status.equals("0")) continue; System.out.println("创建调度器"); //创建任务详情 JobDetail jobDetail= JobBuilder.newJob((Class) Class.forName(jobName)) .withIdentity(jobName,jobGroup) .build(); //往Job任务中传递参数 JobDataMap jobDataMap = jobDetail.getJobDataMap(); List params = scheduleTriggerParamMapper.queryScheduleParamLst(scheduleTrigger.getId()); for (ScheduleTriggerParam param : params) { jobDataMap.put(param.getName(),param.getValue()); } //创建表达式调度器 CronScheduleBuilder cronSchedule = CronScheduleBuilder.cronSchedule(cron); //创建Trigger cronTrigger=TriggerBuilder.newTrigger() .withIdentity(jobName,jobGroup) .withSchedule(cronSchedule) .build(); //将jobDetail和Trigger注入到scheduler调度器中 scheduler.scheduleJob(jobDetail,cronTrigger); }else{ //System.out.println("Quartz 调度任务中已存在该任务"); if(status.equals("0")){ JobKey jobKey = JobKey.jobKey(jobName, jobGroup); scheduler.deleteJob(jobKey); continue; } //调度器中的表达式 String cronExpression = cronTrigger.getCronExpression(); if(!cron.equals(cronExpression)){ //创建表达式调度器 CronScheduleBuilder cronSchedule = CronScheduleBuilder.cronSchedule(cron); //重构 cronTrigger=cronTrigger.getTriggerBuilder() .withIdentity(triggerKey) .withSchedule(cronSchedule) .build(); //刷新调度器 scheduler.rescheduleJob(triggerKey,cronTrigger); } } } } } catch (Exception e) { e.printStackTrace(); } } } 读取数据库中表达式启动定时任务1（每5s执行）

数据库表t_schedule_trigger配置

在这里插入图片描述

MyJob.java

package com.tanle.quartz02.quartz; import lombok.extern.slf4j.Slf4j; import org.quartz.Job; import org.quartz.JobExecutionContext; import org.quartz.JobExecutionException; import org.springframework.stereotype.Component; import java.util.Date; @Component @Slf4j public class MyJob implements Job { @Override public void execute(JobExecutionContext jobExecutionContext) throws JobExecutionException { System.out.println("MyJob是一个空的任务计划,时间："+new Date().toLocaleString()); } }

Spring自带定时任务每10s执行一次，查询自定义触发器表，获取到具体的作业类及任务表达式，quartz的任务为每5s执行一次，所以打印如上 测试结果：

在这里插入图片描述

更改定时任务状态（启用/禁用）

当禁用该触发器时，那么程序只会执行spring自带的定时任务，每10s执行一次查询，所以打印语句如上。

在这里插入图片描述

测试结果：

在这里插入图片描述

定时任务中携带参数

在这里插入图片描述 在这里插入图片描述

MyJob1

package com.tanle.quartz02.quartz; import com.tanle.quartz02.service.ScheduleTriggerParamService; import lombok.extern.slf4j.Slf4j; import org.quartz.*; import org.springframework.beans.factory.annotation.Autowired; import org.springframework.stereotype.Component; import java.util.Date; @Component @Slf4j public class MyJob1 implements Job { @Autowired private ScheduleTriggerParamService scheduleTriggerParamService; @Override public void execute(JobExecutionContext jobExecutionContext) throws JobExecutionException { JobDetail jobDetail = jobExecutionContext.getJobDetail(); JobDataMap jobDataMap = jobDetail.getJobDataMap(); System.out.println(new Date().toLocaleString()+"-->携带参数个数:"+jobDataMap.size()); } }

程序执行spring自带的定时任务，每10s执行一次查询，查询t_schedule_trigger表，调度器表中有两个调度器，都是每5s执行一次，其中一个调度器是需要携带参数的，携带的参数在t_schedule_trigger_param表中，所以一开始调度器启动的时候需要查询t_schedule_trigger_param表数据，最终打印语句如上。 测试结果：

在这里插入图片描述

更改定时任务规则(并接收传输的参数)

在这里插入图片描述

MyJob2

package com.tanle.quartz02.quartz; import lombok.extern.slf4j.Slf4j; import org.quartz.*; import org.springframework.stereotype.Component; import java.util.Date; @Component @Slf4j public class MyJob2 implements Job { @Override public void execute(JobExecutionContext jobExecutionContext) throws JobExecutionException { JobDetail jobDetail = jobExecutionContext.getJobDetail(); JobDataMap jobDataMap = jobDetail.getJobDataMap(); System.out.println(new Date().toLocaleString()+"-->MyJob2参数传递name="+jobDataMap.get("name")+",score="+ jobDataMap.get("score")); } }

程序执行spring自带的定时任务，每10s执行一次查询，查询t_schedule_trigger表，将任务3的表达式由0/5 * * * * ?改成0/20 * * * * ?，最终结果如上 测试结果：

在这里插入图片描述

项目代码结构

在这里插入图片描述



【本文地址】


今日新闻

推荐新闻

CopyRight 2018-2019 办公设备维修网 版权所有 豫ICP备15022753号-3