从IT运维角度 对XXL-JOB 部署的若干研究

2024-06-11 17:44
文章标签 部署 运维 角度 若干 研究 xxl job

本文主要是介绍从IT运维角度 对XXL-JOB 部署的若干研究，希望对大家解决编程问题提供一定的参考价值，需要的开发者们随着小编来一起学习吧！

XXL-JOB研究

文章目录

  • XXL-JOB研究
    • 一、背景说明
    • 二、部署
      • 2.1 docker部署
      • 2.2 修改数据库
      • 2.3 登陆前台
    • 三、部署执行器
      • 3.1 在linux中安装执行器
      • 3.2 克隆github项目
      • 3.3 修改执行器(客户端)配置文件
      • 3.4 打包为jar包
      • 3.5 运行jar包
        • 3.5.1 linux 客户端 运行
        • 3.5.2 windows 客户端运行
        • 3.5.3 控制台比对
    • 四、创建任务
      • 4.1 创建任务
      • 4.2 编辑脚本
      • 4.3 客户端确认
    • 五、将执行器注册为服务
      • 5.1 编写服务文件
      • 5.2 启动服务
      • 5.3 windows 注册为服务参考

一、背景说明

XXL-JOB 是一个分布式任务调度平台，作为IT运维我不懂JAVA，不会开发，只想把XXL-JOB当成一个crontab 网络版，应该怎么做呢
本文记录了，从IT运维角度，部属XXL-JOB的一些折腾记录

二、部署

生产环境不建议使用docker部属，配置文件不好修改，特别是客户端秘钥，
环境变量方式修改不了！
环境变量方式修改不了！！
环境变量方式修改不了！！！

2.1 docker部署

version: '3.8'
services:admin:image: xuxueli/xxl-job-admin:2.4.1restart: alwayshostname: admincontainer_name: xxl_jobports:- "8008:8080"volumes:- "./tmp:/data/applogs"environment:SPRING_DATASOURCE_URL: "jdbc:mysql://数据库IP:30974/xxl_job?useUnicode=true&characterEncoding=UTF-8&autoReconnect=true&serverTimezone=Asia/Shanghai"SPRING_DATASOURCE_USERNAME: "root"SPRING_DATASOURCE_PASSWORD: "密码"

2.2 修改数据库

执行sql文件即可

在这里插入图片描述

2.3 登陆前台

http://IP地址:8008/xxl-job-admin ，后缀一定要加

默认账户admin，密码123456

三、部署执行器

3.1 在linux中安装执行器

安装java环境

sudo yum install java-11-openjdk-devel -y
yum install maven -y

加速 maven

  <mirrors><!-- mirror| Specifies a repository mirror site to use instead of a given repository. The repository that| this mirror serves has an ID that matches the mirrorOf element of this mirror. IDs are used| for inheritance and direct lookup purposes, and must be unique across the set of mirrors.|<mirror><id>mirrorId</id><mirrorOf>repositoryId</mirrorOf><name>Human Readable Name for this Mirror.</name><url>http://my.repository.com/repo/path</url></mirror>--><mirror><id>nexus-aliyun</id><mirrorOf>central</mirrorOf><name>Nexus aliyun</name><url>http://maven.aliyun.com/nexus/content/groups/public</url></mirror></mirrors>

3.2 克隆github项目

git clone https://github.com/xuxueli/xxl-job.git
进入执行器目录

3.3 修改执行器(客户端)配置文件

vi src/main/resources/application.properties

# web port
server.port=8081
# no web
#spring.main.web-environment=false# log config
logging.config=classpath:logback.xml### xxl-job admin address list, such as "http://address" or "http://address01,http://address02"
xxl.job.admin.addresses=http://服务端IP:8008/xxl-job-admin### xxl-job, access token-docker部署的话一定要写这个,环境变量方式修改不了
xxl.job.accessToken=default_token### xxl-job executor appname
xxl.job.executor.appname=xxl-job-executor-sample
### xxl-job executor registry-address: default use address to registry , otherwise use ip:port if address is null
xxl.job.executor.address=
### xxl-job executor server-info
xxl.job.executor.ip=
xxl.job.executor.port=9999
### xxl-job executor log-path
xxl.job.executor.logpath=
### xxl-job executor log-retention-days
xxl.job.executor.logretentiondays=30

3.4 打包为jar包

#进入到执行器目录执行，速度慢的话设置镜像
mvn clean package

3.5 运行jar包

3.5.1 linux 客户端 运行
java -jar target/xxl-job-executor-sample-springboot-2.4.1.jar

正常运行的日志


13:35:46.915 logback [Thread-4] INFO  com.xxl.job.core.server.EmbedServer - >>>>>>>>>>> xxl-job remoting server start success, nettype = class com.xxl.job.core.server.EmbedServer, port = 9999
3.5.2 windows 客户端运行

直接把jar包拷贝到windows运行,windows需要安装java环境，我这里直接拷了个JRE的绿色包也能运行

在这里插入图片描述

3.5.3 控制台比对

在这里插入图片描述

token不对的日志，docker部署就会遇到这个问题，环境变量改不了token


12:28:15.222 logback [xxl-job, executor ExecutorRegistryThread] INFO  c.x.j.c.t.ExecutorRegistryThread - >>>>>>>>>>> xxl-job registry fail, registryParam:RegistryParam{registryGroup='EXECUTOR', registryKey='xxl-job-executor-sample', registryValue='http://IP地址:9999/'}, registryResult:ReturnT [code=500, msg=The access token is wrong., content=null]

四、创建任务

4.1 创建任务

在这里插入图片描述

4.2 编辑脚本

在这里插入图片描述

#!/bin/bash# 获取本机 IP 地址
IP_ADDRESS=$(hostname -I)echo "xxl-job: hello shell"
echo "IP 地址：$IP_ADDRESS"echo "脚本位置：$0"
echo "任务参数：$1"
echo "分片序号 = $2"
echo "分片总数 = $3"echo "Good bye!"
ifconfig > 123.txt
exit 0

4.3 客户端确认

验证txt的路径可得
客户端的当前目录是jar包，所在的目录

/docker/xxl-job/xxl-job-executor-samples/xxl-job-executor-sample-springboot/123.txt

客户端的日志位于

cd /data/applogs/xxl-job/jobhandler

客户端脚本位于

[root@ks9p-yum-source01 jobhandler]# ls /data/applogs/xxl-job/jobhandler/gluesource/
2_1718085164000.sh

五、将执行器注册为服务

5.1 编写服务文件

sudo nano /etc/systemd/system/xxl-job-executor.service

填入内容

[Unit]
Description=XXL-JOB Executor
After=syslog.target network.target[Service]
Type=simple
WorkingDirectory=/docker/xxl-job/xxl-job-executor-samples/xxl-job-executor-sample-springboot
ExecStart=/usr/bin/java -jar target/xxl-job-executor-sample-springboot-2.4.1.jar
Restart=always
StandardOutput=syslog
StandardError=syslog[Install]
WantedBy=multi-user.target

5.2 启动服务

sudo systemctl daemon-reload
sudo systemctl start xxl-job-executor
sudo systemctl enable xxl-job-executor
sudo systemctl status xxl-job-executor

5.3 windows 注册为服务参考

将exe程序注册为windows服务方法总结_exe注册成服务

https://www.xiaoweigod.com/pc/1638.html

这篇关于从IT运维角度 对XXL-JOB 部署的若干研究的文章就介绍到这儿，希望我们推荐的文章对编程师们有所帮助！


http://www.chinasem.cn/article/1051858。

相关文章

通过Docker容器部署Python环境的全流程

通过Docker容器部署Python环境的全流程

《通过Docker容器部署Python环境的全流程》在现代化开发流程中,Docker因其轻量化、环境隔离和跨平台一致性的特性,已成为部署Python应用的标准工具,本文将详细演示如何通过Docker容... 目录引言一、docker与python的协同优势二、核心步骤详解三、进阶配置技巧四、生产环境最佳实践
阅读更多...
Nginx部署HTTP/3的实现步骤

Nginx部署HTTP/3的实现步骤

《Nginx部署HTTP/3的实现步骤》本文介绍了在Nginx中部署HTTP/3的详细步骤,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学... 目录前提条件第一步：安装必要的依赖库第二步：获取并构建 BoringSSL第三步：获取 Nginx
阅读更多...
redis-sentinel基础概念及部署流程

redis-sentinel基础概念及部署流程

《redis-sentinel基础概念及部署流程》RedisSentinel是Redis的高可用解决方案,通过监控主从节点、自动故障转移、通知机制及配置提供,实现集群故障恢复与服务持续可用,核心组件包... 目录一. 引言二. 核心功能三. 核心组件四. 故障转移流程五. 服务部署六. sentinel部署
阅读更多...
SpringBoot集成XXL-JOB实现任务管理全流程

SpringBoot集成XXL-JOB实现任务管理全流程

《SpringBoot集成XXL-JOB实现任务管理全流程》XXL-JOB是一款轻量级分布式任务调度平台,功能丰富、界面简洁、易于扩展,本文介绍如何通过SpringBoot项目,使用RestTempl... 目录一、前言二、项目结构简述三、Maven 依赖四、Controller 代码详解五、Service
阅读更多...
解决Nginx启动报错Job for nginx.service failed because the control process exited with error code问题

解决Nginx启动报错Job for nginx.service failed because the control process exited with error code问题

《解决Nginx启动报错Jobfornginx.servicefailedbecausethecontrolprocessexitedwitherrorcode问题》Nginx启... 目录一、报错如下二、解决原因三、解决方式总结一、报错如下Job for nginx.service failed bec
阅读更多...
Linux部署中的文件大小写问题的解决方案

Linux部署中的文件大小写问题的解决方案

《Linux部署中的文件大小写问题的解决方案》在本地开发环境（Windows/macOS）一切正常,但部署到Linux服务器后出现模块加载错误,核心原因是Linux文件系统严格区分大小写,所以本文给大... 目录问题背景解决方案配置要求问题背景在本地开发环境（Windows/MACOS）一切正常，但部署到
阅读更多...
使用IDEA部署Docker应用指南分享

使用IDEA部署Docker应用指南分享

《使用IDEA部署Docker应用指南分享》本文介绍了使用IDEA部署Docker应用的四步流程：创建Dockerfile、配置IDEADocker连接、设置运行调试环境、构建运行镜像,并强调需准备本... 目录一、创建 dockerfile 配置文件二、配置 IDEA 的 Docker 连接三、配置 Do
阅读更多...
Java中的xxl-job调度器线程池工作机制

Java中的xxl-job调度器线程池工作机制

《Java中的xxl-job调度器线程池工作机制》xxl-job通过快慢线程池分离短时与长时任务,动态降级超时任务至慢池,结合异步触发和资源隔离机制,提升高频调度的性能与稳定性,支撑高并发场景下的可靠... 目录⚙️ 一、调度器线程池的核心设计 二、线程池的工作流程 三、线程池配置参数与优化 四、总结：线程
阅读更多...
MySQL 主从复制部署及验证(示例详解)

MySQL 主从复制部署及验证(示例详解)

《MySQL主从复制部署及验证(示例详解)》本文介绍MySQL主从复制部署步骤及学校管理数据库创建脚本,包含表结构设计、示例数据插入和查询语句,用于验证主从同步功能,感兴趣的朋友一起看看吧... 目录mysql 主从复制部署指南部署步骤1.环境准备2. 主服务器配置3. 创建复制用户4. 获取主服务器状态5
阅读更多...
golang程序打包成脚本部署到Linux系统方式

golang程序打包成脚本部署到Linux系统方式

《golang程序打包成脚本部署到Linux系统方式》Golang程序通过本地编译（设置GOOS为linux生成无后缀二进制文件）,上传至Linux服务器后赋权执行,使用nohup命令实现后台运行,完... 目录本地编译golang程序上传Golang二进制文件到linux服务器总结本地编译Golang程序
阅读更多...

Copyright China编程 23002807@qq.com

沪ICP备2023033072号-2