从IT运维角度 对XXL-JOB 部署的若干研究

2024-06-11 17:44

本文主要是介绍从IT运维角度 对XXL-JOB 部署的若干研究,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

XXL-JOB研究

文章目录

  • XXL-JOB研究
    • 一、背景说明
    • 二、部署
      • 2.1 docker部署
      • 2.2 修改数据库
      • 2.3 登陆前台
    • 三、部署执行器
      • 3.1 在linux中安装执行器
      • 3.2 克隆github项目
      • 3.3 修改执行器(客户端)配置文件
      • 3.4 打包为jar包
      • 3.5 运行jar包
        • 3.5.1 linux 客户端 运行
        • 3.5.2 windows 客户端运行
        • 3.5.3 控制台比对
    • 四、创建任务
      • 4.1 创建任务
      • 4.2 编辑脚本
      • 4.3 客户端确认
    • 五、将执行器注册为服务
      • 5.1 编写服务文件
      • 5.2 启动服务
      • 5.3 windows 注册为服务参考

一、背景说明

XXL-JOB 是一个分布式任务调度平台,作为IT运维我不懂JAVA,不会开发,只想把XXL-JOB当成一个crontab 网络版,应该怎么做呢
本文记录了,从IT运维角度,部属XXL-JOB的一些折腾记录

二、部署

生产环境不建议使用docker部属,配置文件不好修改,特别是客户端秘钥,
环境变量方式修改不了!
环境变量方式修改不了!!
环境变量方式修改不了!!!

2.1 docker部署

version: '3.8'
services:admin:image: xuxueli/xxl-job-admin:2.4.1restart: alwayshostname: admincontainer_name: xxl_jobports:- "8008:8080"volumes:- "./tmp:/data/applogs"environment:SPRING_DATASOURCE_URL: "jdbc:mysql://数据库IP:30974/xxl_job?useUnicode=true&characterEncoding=UTF-8&autoReconnect=true&serverTimezone=Asia/Shanghai"SPRING_DATASOURCE_USERNAME: "root"SPRING_DATASOURCE_PASSWORD: "密码"

2.2 修改数据库

执行sql文件即可

在这里插入图片描述

2.3 登陆前台

http://IP地址:8008/xxl-job-admin ,后缀一定要加

默认账户admin,密码123456

三、部署执行器

3.1 在linux中安装执行器

安装java环境

sudo yum install java-11-openjdk-devel -y
yum install maven -y

加速 maven

  <mirrors><!-- mirror| Specifies a repository mirror site to use instead of a given repository. The repository that| this mirror serves has an ID that matches the mirrorOf element of this mirror. IDs are used| for inheritance and direct lookup purposes, and must be unique across the set of mirrors.|<mirror><id>mirrorId</id><mirrorOf>repositoryId</mirrorOf><name>Human Readable Name for this Mirror.</name><url>http://my.repository.com/repo/path</url></mirror>--><mirror><id>nexus-aliyun</id><mirrorOf>central</mirrorOf><name>Nexus aliyun</name><url>http://maven.aliyun.com/nexus/content/groups/public</url></mirror></mirrors>

3.2 克隆github项目

git clone https://github.com/xuxueli/xxl-job.git
进入执行器目录

3.3 修改执行器(客户端)配置文件

vi src/main/resources/application.properties
# web port
server.port=8081
# no web
#spring.main.web-environment=false# log config
logging.config=classpath:logback.xml### xxl-job admin address list, such as "http://address" or "http://address01,http://address02"
xxl.job.admin.addresses=http://服务端IP:8008/xxl-job-admin### xxl-job, access token-docker部署的话一定要写这个,环境变量方式修改不了
xxl.job.accessToken=default_token### xxl-job executor appname
xxl.job.executor.appname=xxl-job-executor-sample
### xxl-job executor registry-address: default use address to registry , otherwise use ip:port if address is null
xxl.job.executor.address=
### xxl-job executor server-info
xxl.job.executor.ip=
xxl.job.executor.port=9999
### xxl-job executor log-path
xxl.job.executor.logpath=
### xxl-job executor log-retention-days
xxl.job.executor.logretentiondays=30

3.4 打包为jar包

#进入到执行器目录执行,速度慢的话设置镜像
mvn clean package

3.5 运行jar包

3.5.1 linux 客户端 运行
java -jar target/xxl-job-executor-sample-springboot-2.4.1.jar

正常运行的日志


13:35:46.915 logback [Thread-4] INFO  com.xxl.job.core.server.EmbedServer - >>>>>>>>>>> xxl-job remoting server start success, nettype = class com.xxl.job.core.server.EmbedServer, port = 9999
3.5.2 windows 客户端运行

直接把jar包拷贝到windows运行,windows需要安装java环境,我这里直接拷了个JRE的绿色包也能运行

在这里插入图片描述

3.5.3 控制台比对

在这里插入图片描述

token不对的日志,docker部署就会遇到这个问题,环境变量改不了token


12:28:15.222 logback [xxl-job, executor ExecutorRegistryThread] INFO  c.x.j.c.t.ExecutorRegistryThread - >>>>>>>>>>> xxl-job registry fail, registryParam:RegistryParam{registryGroup='EXECUTOR', registryKey='xxl-job-executor-sample', registryValue='http://IP地址:9999/'}, registryResult:ReturnT [code=500, msg=The access token is wrong., content=null]

四、创建任务

4.1 创建任务

在这里插入图片描述

4.2 编辑脚本

在这里插入图片描述

#!/bin/bash# 获取本机 IP 地址
IP_ADDRESS=$(hostname -I)echo "xxl-job: hello shell"
echo "IP 地址:$IP_ADDRESS"echo "脚本位置:$0"
echo "任务参数:$1"
echo "分片序号 = $2"
echo "分片总数 = $3"echo "Good bye!"
ifconfig > 123.txt
exit 0

4.3 客户端确认

验证txt的路径可得
客户端的当前目录是jar包,所在的目录

/docker/xxl-job/xxl-job-executor-samples/xxl-job-executor-sample-springboot/123.txt

客户端的日志位于

cd /data/applogs/xxl-job/jobhandler

客户端脚本位于

[root@ks9p-yum-source01 jobhandler]# ls /data/applogs/xxl-job/jobhandler/gluesource/
2_1718085164000.sh

五、将执行器注册为服务

5.1 编写服务文件

sudo nano /etc/systemd/system/xxl-job-executor.service

填入内容

[Unit]
Description=XXL-JOB Executor
After=syslog.target network.target[Service]
Type=simple
WorkingDirectory=/docker/xxl-job/xxl-job-executor-samples/xxl-job-executor-sample-springboot
ExecStart=/usr/bin/java -jar target/xxl-job-executor-sample-springboot-2.4.1.jar
Restart=always
StandardOutput=syslog
StandardError=syslog[Install]
WantedBy=multi-user.target

5.2 启动服务

sudo systemctl daemon-reload
sudo systemctl start xxl-job-executor
sudo systemctl enable xxl-job-executor
sudo systemctl status xxl-job-executor

5.3 windows 注册为服务参考

将exe程序注册为windows服务方法总结_exe注册成服务

https://www.xiaoweigod.com/pc/1638.html

这篇关于从IT运维角度 对XXL-JOB 部署的若干研究的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1051858

相关文章

Tomcat高效部署与性能优化方式

《Tomcat高效部署与性能优化方式》本文介绍了如何高效部署Tomcat并进行性能优化,以确保Web应用的稳定运行和高效响应,高效部署包括环境准备、安装Tomcat、配置Tomcat、部署应用和启动T... 目录Tomcat高效部署与性能优化一、引言二、Tomcat高效部署三、Tomcat性能优化总结Tom

如何在本地部署 DeepSeek Janus Pro 文生图大模型

《如何在本地部署DeepSeekJanusPro文生图大模型》DeepSeekJanusPro模型在本地成功部署,支持图片理解和文生图功能,通过Gradio界面进行交互,展示了其强大的多模态处... 目录什么是 Janus Pro1. 安装 conda2. 创建 python 虚拟环境3. 克隆 janus

本地私有化部署DeepSeek模型的详细教程

《本地私有化部署DeepSeek模型的详细教程》DeepSeek模型是一种强大的语言模型,本地私有化部署可以让用户在自己的环境中安全、高效地使用该模型,避免数据传输到外部带来的安全风险,同时也能根据自... 目录一、引言二、环境准备(一)硬件要求(二)软件要求(三)创建虚拟环境三、安装依赖库四、获取 Dee

Linux部署jar包过程

《Linux部署jar包过程》文章介绍了在Linux系统上部署Java(jar)包时需要注意的几个关键点,包括统一JDK版本、添加打包插件、修改数据库密码以及正确执行jar包的方法... 目录linux部署jar包1.统一jdk版本2.打包插件依赖3.修改密码4.执行jar包总结Linux部署jar包部署

deepseek本地部署使用步骤详解

《deepseek本地部署使用步骤详解》DeepSeek是一个开源的深度学习模型,支持自然语言处理和推荐系统,本地部署步骤包括克隆仓库、创建虚拟环境、安装依赖、配置模型和数据、启动服务、调试与优化以及... 目录环境要求部署步骤1. 克隆 DeepSeek 仓库2. 创建虚拟环境3. 安装依赖4. 配置模型

DeepSeek模型本地部署的详细教程

《DeepSeek模型本地部署的详细教程》DeepSeek作为一款开源且性能强大的大语言模型,提供了灵活的本地部署方案,让用户能够在本地环境中高效运行模型,同时保护数据隐私,在本地成功部署DeepSe... 目录一、环境准备(一)硬件需求(二)软件依赖二、安装Ollama三、下载并部署DeepSeek模型选

python管理工具之conda安装部署及使用详解

《python管理工具之conda安装部署及使用详解》这篇文章详细介绍了如何安装和使用conda来管理Python环境,它涵盖了从安装部署、镜像源配置到具体的conda使用方法,包括创建、激活、安装包... 目录pytpshheraerUhon管理工具:conda部署+使用一、安装部署1、 下载2、 安装3

解决systemctl reload nginx重启Nginx服务报错:Job for nginx.service invalid问题

《解决systemctlreloadnginx重启Nginx服务报错:Jobfornginx.serviceinvalid问题》文章描述了通过`systemctlstatusnginx.se... 目录systemctl reload nginx重启Nginx服务报错:Job for nginx.javas

k8s部署MongDB全过程

《k8s部署MongDB全过程》文章介绍了如何在Kubernetes集群中部署MongoDB,包括环境准备、创建Secret、创建服务和Deployment,并通过Robo3T工具测试连接... 目录一、环境准备1.1 环境说明1.2 创建 namespace1.3 创建mongdb账号/密码二、创建Sec

Java中的Opencv简介与开发环境部署方法

《Java中的Opencv简介与开发环境部署方法》OpenCV是一个开源的计算机视觉和图像处理库,提供了丰富的图像处理算法和工具,它支持多种图像处理和计算机视觉算法,可以用于物体识别与跟踪、图像分割与... 目录1.Opencv简介Opencv的应用2.Java使用OpenCV进行图像操作opencv安装j