分布式定时任务:xxl-job

基础

XXL - Job采用的是调度中心(Scheduler)与执行器(Executor)分离的架构设计,这种设计带来了诸多优势,比如高可用性、可扩展性以及便于分布式部署等。

1. 调度中心(XXL - Job Admin)

这是一个独立的Web应用,负责任务的管理和调度工作。

  • 主要功能
    • 提供可视化的管理界面,方便用户管理任务、执行器以及查看调度日志。
    • 按照预设的调度策略触发任务。
    • 监控任务的执行状态,并在任务执行异常时进行报警。
    • 管理执行器的注册和发现过程。
  • 技术特点
    • 基于Spring Boot开发,可独立部署。
    • 需要连接数据库(支持MySQL等)来存储任务配置和调度日志。
  • 部署方式
    • 至少部署一个实例,若要实现高可用,则需部署多个实例并通过Nginx进行负载均衡。

2. 执行器(Executor)

执行器是嵌入在业务系统中的组件,负责实际执行任务。

  • 主要功能
    • 注册到调度中心,让调度中心知道自己的存在。
    • 接收调度中心发送的任务执行请求。
    • 执行具体的业务逻辑,并将执行结果返回给调度中心。
  • 技术特点
    • 以Jar包的形式集成到业务系统中,目前支持Java、Python等语言。
    • 支持自动注册和手动注册两种方式与调度中心建立连接。
  • 部署方式
    • 可以和业务系统部署在同一服务器上,也能独立部署。
    • 支持集群部署,从而实现水平扩展。

示例

下面为你提供XXL - Job调度中心与执行器分开部署启动的示例,该示例适用于生产环境或测试环境:

1. 部署调度中心(XXL - Job Admin)

步骤1:创建数据库

首先创建名为xxl - job的数据库,然后执行官方SQL脚本:

-- 创建数据库
CREATE DATABASE xxl_job DEFAULT CHARACTER SET utf8mb4;-- 导入SQL脚本(从GitHub获取)
-- https://github.com/xuxueli/xxl-job/blob/master/doc/db/tables_xxl_job.sql
步骤2:下载调度中心源码

从GitHub下载XXL - Job源码并解压:

git clone https://github.com/xuxueli/xxl-job.git
cd xxl-job/xxl-job-admin

注意:可以选择只保留 xxl-job-admin 模块,然后通过 Maven 引入 xxl-job-core 依赖,这样的方式能让项目结构更加简洁,同时也便于依赖管理和后续的升级维护等操作

步骤3:配置调度中心

修改application.properties文件:

# 服务器端口
server.port=8081# 数据库配置
spring.datasource.url=jdbc:mysql://localhost:3306/xxl_job?useUnicode=true&characterEncoding=UTF-8&autoReconnect=true&serverTimezone=Asia/Shanghai
spring.datasource.username=root
spring.datasource.password=root
spring.datasource.driver-class-name=com.mysql.cj.jdbc.Driver# 访问令牌(可选)
xxl.job.accessToken=
步骤4: 验证启动

运行main方法(无需打包),调度中心会在8081端口启动。
访问管理界面:http://localhost:8080/xxl-job-admin
默认账号:admin,密码:123456

2. 创建执行器项目(Spring Boot应用)

步骤1:创建Spring Boot项目

添加以下依赖到pom.xml

<dependencies><!-- Spring Boot Web --><dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-web</artifactId></dependency><!-- XXL-Job 执行器 --><dependency><groupId>com.xuxueli</groupId><artifactId>xxl-job-core</artifactId><version>2.4.1</version></dependency>
</dependencies>
步骤2:配置执行器

创建执行器配置类:

package com.example.demo.config;import com.xxl.job.core.executor.impl.XxlJobSpringExecutor;
import org.springframework.beans.factory.annotation.Value;
import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;@Configuration
public class XxlJobConfig {@Value("${xxl.job.admin.addresses}")private String adminAddresses;@Value("${xxl.job.executor.appname}")private String appname;@Value("${xxl.job.executor.ip}")private String ip;@Value("${xxl.job.executor.port}")private int port;@Value("${xxl.job.accessToken}")private String accessToken;@Value("${xxl.job.executor.logpath}")private String logPath;@Value("${xxl.job.executor.logretentiondays}")private int logRetentionDays;@Beanpublic XxlJobSpringExecutor xxlJobExecutor() {XxlJobSpringExecutor executor = new XxlJobSpringExecutor();executor.setAdminAddresses(adminAddresses);executor.setAppname(appname);executor.setIp(ip);executor.setPort(port);executor.setAccessToken(accessToken);executor.setLogPath(logPath);executor.setLogRetentionDays(logRetentionDays);return executor;}
}
步骤3:配置application.properties
# 执行器服务端口
server.port=8081# XXL-Job 配置
xxl.job.admin.addresses=http://localhost:8080/xxl-job-admin  # 调度中心地址
xxl.job.executor.appname=my-executor                              # 执行器名称(需在管理界面注册)
xxl.job.executor.ip=                                               # 自动获取IP
xxl.job.executor.port=9999                                         # 执行器内部服务端口
xxl.job.accessToken=                                               # 访问令牌(与调度中心一致)
xxl.job.executor.logpath=/data/applogs/xxl-job/jobhandler         # 日志路径
xxl.job.executor.logretentiondays=30                              # 日志保留天数
步骤4:创建任务处理器
package com.example.demo.job;import com.xxl.job.core.context.XxlJobHelper;
import com.xxl.job.core.handler.annotation.XxlJob;
import org.springframework.stereotype.Component;@Component
public class SampleJobHandler {@XxlJob("demoJobHandler")public void demoJobHandler() throws Exception {XxlJobHelper.log("XXL-Job任务执行中");// 业务逻辑...XxlJobHelper.handleSuccess("任务执行成功");}
}
步骤5:启动执行器

运行Spring Boot应用主类:

package com.example.demo;import org.springframework.boot.SpringApplication;
import org.springframework.boot.autoconfigure.SpringBootApplication;@SpringBootApplication
public class Application {public static void main(String[] args) {SpringApplication.run(Application.class, args);}
}

3. 在调度中心注册执行器

  1. 访问调度中心管理界面:http://localhost:8080/xxl-job-admin
  2. 进入执行器管理页面,点击"新增":
    • AppName:填写my-executor(与执行器配置中的appname一致)
    • 名称:自定义(如"示例执行器")
    • 注册方式:选择"自动注册"
    • 机器地址:无需填写(自动注册)
  3. 点击"保存"。

4. 创建并测试任务

  1. 进入任务管理页面,点击"新增":
    • 执行器:选择刚创建的my-executor
    • 任务描述:自定义(如"示例任务")
    • 调度类型:选择"固定速度"
    • Cron:填写0/5 * * * * ?(每5秒执行一次)
    • 任务Handler:填写demoJobHandler(与任务处理器注解一致)
  2. 点击"保存",再点击"启动"。
  3. 查看调度日志,确认任务是否正常执行。

关键配置说明

组件端口用途
调度中心8081管理界面和API服务
执行器应用8080Spring Boot应用主端口
执行器内部服务9999接收调度中心的任务请求(无需外部访问)

补充

1.mysql-connector-j 依赖

mysql-connector-j 是 MySQL 官方提供的 Java 数据库连接驱动(JDBC Driver),用于在 Java 应用程序中连接和操作 MySQL 数据库。它是 MySQL 8.0 版本之后的标准驱动名称,替代了旧的 mysql-connector-java

新旧版本对比
驱动名称适用 MySQL 版本主要区别
mysql-connector-java5.x 及以下旧版驱动,已停止更新,最后版本为 8.0.31(支持 MySQL 5 和 8)。
mysql-connector-j8.0+新版驱动,从 8.0.32 版本开始独立为 mysql-connector-j,仅支持 MySQL 8+。
常见问题与注意事项
  1. 版本兼容性

    • 若使用 MySQL 5.7,需切换回旧驱动:
      <dependency><groupId>mysql</groupId><artifactId>mysql-connector-java</artifactId><version>8.0.31</version> <!-- 最后兼容 MySQL 5 的版本 -->
      </dependency>
      
    • 若使用 MySQL 8.0+,推荐使用 mysql-connector-j
  2. JDBC URL 格式

    • MySQL 8+ 需要指定时区参数:
      spring.datasource.url=jdbc:mysql://localhost:3306/xxl_job?useUnicode=true&characterEncoding=UTF-8&autoReconnect=true&serverTimezone=Asia/Shanghai
      
选择依据
  1. 检查 MySQL 版本:
    SELECT VERSION();
    
  2. 根据版本选择对应的驱动依赖。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如若转载,请注明出处:http://www.pswp.cn/news/913267.shtml
繁体地址,请注明出处:http://hk.pswp.cn/news/913267.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

易语言实现钉钉PC端高频率链接批量打开系统

易语言实现钉钉PC端高频率链接批量打开系统 一、需求分析与技术方案 核心需求: 在钉钉PC端私聊消息中嵌入特殊格式链接用户点击后通过自定义协议唤醒本地程序支持每分钟处理10万次请求的批量操作实现链接的批量生成和管理技术方案: #mermaid-svg-AYoMWYQQf71dlyEF {font-fa…

MyBatis如何实现动态数据源切换?

大家好&#xff0c;我是锋哥。今天分享关于【MyBatis如何实现动态数据源切换&#xff1f;】面试题。希望对大家有帮助&#xff1b; MyBatis如何实现动态数据源切换&#xff1f; 超硬核AI学习资料&#xff0c;现在永久免费了&#xff01; 在MyBatis中实现动态数据源切换&#…

实践篇:14-构建 Node.js 应用程序镜像

背景介绍 Node.js是一个基于 Chrome V8 引擎的 JavaScript 运行时环境&#xff0c;以其事件驱动、非阻塞 I/O 模型而闻名&#xff0c;广泛用于构建后端服务和前端应用。 Node.js 的特点使其非常适合容器化部署&#xff1a; 轻量级运行时&#xff1a;相比传统后端语言&#xf…

Spring Cloud 微服务(链路追踪与日志聚合)

&#x1f4cc; 摘要 在微服务架构中&#xff0c;随着服务数量的增加和调用关系的复杂化&#xff0c;传统的日志记录方式已经无法满足对系统运行状态的全面掌控。如何快速定位异常请求、分析服务调用耗时、追踪完整链路成为运维和开发人员面临的核心挑战。 为此&#xff0c;Sp…

PADS交互式布局

PADS的交互式布局通过原理图与PCB的双向联动大幅提升设计效率。在原理图中框选电路模块时&#xff0c;PCB视图将自动高亮对应元件组并生成可移动簇&#xff0c;拖动时保持模块内部相对位置不变。布局过程中启用实时推挤功能&#xff08;Placement Shoving&#xff09;&#xff…

类图+案例+代码详解:软件设计模式----原型模式

5、原型模式 通过复制现有对象来创建新对象&#xff0c;避免从零开始构建&#xff0c;就像 “复印文件” 一样。 克隆的核心是复用现有对象状态 用 克隆熊猫 举例&#xff0c;秒懂原理 假设你有一只熊猫对象&#xff08;属性&#xff1a;名字、年龄、毛色&#xff09;&#…

Python-FAQ-__name__、__main__

1 需求 2 接口 3 示例 4 参考资料 在 Python 中&#xff0c;像 __name__ 这样的双下划线属性&#xff08;也称为 "dunder" 属性&#xff0c;即 "double underscore" 的缩写&#xff09;是 Python 的特殊属性或方法&#xff0c;它们为类、对象或模块提供了…

Adobe高阶技巧与设计师创意思维的进阶指南

作为一名在全球设计圈摸爬滚打了十年的职业设计师&#xff0c;我深知创意与技术的结合是点燃灵感的火花。凭借英国Parvis School of Economics and Music大学提供的Adobe正版教育订阅&#xff0c;我得以在设计之路上不断探索与突破。今天&#xff0c;我想以轻松实用的口吻&…

音视频会议服务搭建(设计方案-Go服务端API业务逻辑流程图)-04

前言 这一篇是 关于 Go服务端相关的音视频会议的接口API业务逻辑流程图肯定是不能完全复用到你的项目中去的&#xff0c;但是希望对你有一些参考性的帮助嗯&#xff0c;我也是在不断的进行完善和优化&#xff0c;并不是最终的结构&#xff0c;先定好大方向&#xff0c;然后不断…

C++ Qt Widget绘图画布缩放与平移:实现CAD级交互体验

在图形应用程序开发中&#xff0c;实现流畅的缩放和平移功能是创建专业级绘图工具的基础。本文将深入探讨如何在Qt Widget中实现CAD级别的交互体验&#xff0c;包括视图变换、坐标系统管理以及交互功能实现。核心概念&#xff1a;视图变换与坐标系统 在图形应用中&#xff0c;我…

Paimon 位图索引解析:高效等值查询的秘密( Bit-Sliced Index)

BitmapFileIndexBitmapFileIndex 这个类 是 Paimon 中一个非常重要的索引类型&#xff0c;它使用位图&#xff08;Bitmap&#xff09;来精确定位数据&#xff0c;尤其擅长处理低基数&#xff08;low-cardinality&#xff09;列的等值查询。BitmapFileIndex 实现了 FileIndexer …

S7-1200 CPU 与 S7-200 CPU S7通信(S7-1200 作为服务器

7-1200 CPU 与 S7-200 CPU S7通信&#xff08;S7-1200 作为服务器&#xff09; S7-1200 CPU 与 S7-200 CPU 之间的通信只能通过 S7 通信来实现&#xff0c;因为 S7-200 的以太网模块只支持S7 通信。当S7-200作为客户端&#xff0c;S7-1200作为服务器&#xff0c;需在客户端单边…

pyspark大规模数据加解密优化实践

假如有1亿行数据 方法1 spark udf解密 from pyspark.sql import SparkSession import pyspark.sql.functions as F from pyDes import * import binasciisparkSparkSession.builder.getOrCreate()def dec_fun(text):key triple_des(b"HHHHHHHHHHHHHHHHHHHHHHHH", CB…

华为云Flexus+DeepSeek征文|华为云ECS与CCE:从介绍到架构部署·仅需要此文足矣

前引&#xff1a;当今的企业面临着前所未有的技术挑战&#xff1a;如何构建既安全又高效、既灵活又可靠的云服务架构&#xff1f;如何有效整合人工智能技术&#xff0c;打造智能化的运维和服务体系&#xff1f;这些问题的答案&#xff0c;正在悄然改变着企业级IT基础设施的生态…

DAY 50 预训练模型+CBAM模块

浙大疏锦行https://blog.csdn.net/weixin_45655710 知识点回顾&#xff1a; resnet结构解析CBAM放置位置的思考针对预训练模型的训练策略 差异化学习率三阶段微调 作业&#xff1a; 好好理解下resnet18的模型结构尝试对vgg16cbam进行微调策略 ResNet-18 结构核心思想 可以将R…

docker连接mysql

查看在运行的容器&#xff1a;docker ps -s 进入容器&#xff1a;docker exec -it 容器号或名 /bin/bash&#xff0c;如&#xff1a;docker exec -it c04c438ff177 /bin/bash 或docker exec -it mysql /bin/bash。 3. 登录mysql&#xff1a;mysql -uroot -p123456

javaweb第182节Linux概述~ 虚拟机连接不上FinalShell

问题描述 虚拟机无法连接到finalshell 报错 session.connect:java.net.socketexception:connection reset 或者 connection is closed by foreign host 解决 我经过一系列的排查&#xff0c;花费了一天的时间后&#xff0c;发现&#xff0c;只是因为&#xff0c;我将连接…

高压电缆护层安全的智能防线:TLKS-PLGD 监控设备深度解析

在现代电力系统庞大复杂的网络中&#xff0c;高压电缆护层是守护电力传输的 "隐形铠甲"&#xff0c;其安全直接影响电网稳定。传统监测手段响应慢、精度低&#xff0c;难以满足安全运维需求。TLKS-PLGD 高压电缆护层环流监控设备应运而生&#xff0c;提供智能化解决方…

Element-Plus Cascader 级联选择器获取节点名称和value值方法

html 部分 <template><el-cascaderref"selectAeraRef":options"areas":disabled"disabled":props"optionProps"v-model"selectedOptions"filterablechange"handleChange"><template #default"…

STM32中实现shell控制台(命令解析实现)

文章目录一、核心设计思想二、命令系统实现详解&#xff08;含完整注释&#xff09;1. 示例命令函数实现2. 初始化命令系统3. 命令注册函数4. 命令查找函数5. 命令执行函数三、命令结构体&#xff08;cmd\_t&#xff09;四、运行效果示例五、小结在嵌入式系统的命令行控制台&am…