HuggingFists系统功能介绍(4)--作业管理

2024-02-25 17:44

本文主要是介绍HuggingFists系统功能介绍(4)--作业管理,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

作业管理

    在生产环境中,为了确保数据业务的持续稳定性,所以能够上线的数据处理与分析流程都必须是稳定的。且很多场景下,流程的调度运行都是自动完成的。这样能最大限度的降低人为操作引起的问题。作业管理用于帮助使用者管理以及调度经过测试验证并发布了的流程。作业管理提供了流程作业和流程任务两个概念。流程作业描述了流程运行所需的资源、调度计划等信息。每当流程作业满足调度计划的调度条件时就会产生一个具体的流程任务,HuggingFists会调度该流程任务完成具体的执行。

作业

       下面我们进入作业管理。

      

界面的左侧部分为作业的分组树,可以对作业按业务类型进行分组管理。点中分组,可以在界面的右侧以列表形式看到分组下的所有作业。作业分为即时、定时以及事件触发三种类型。

  • 即时作业:作业创建后会被立即执行,且只执行一次。
  • 定时作业:作业按照设定的时间调度计划,定期运行,可调度多次,每次产生一个流程任务。
  • 事件触发作业:当事件满足作业的触发条件时,作业被调度运行,可调度多次,每次产生一个流程任务。HuggingFists的社区版不支持此种类型的调度方式。

        在定义可多次运行的作业时,需要格外注意作业可能被调度的频次是否会超出系统计算资源的支撑能力。超出后会给系统的整体调度运行带来不可预知的问题。

        下面我们通过创建一个“定时作业”来简单了解作业管理的相关功能。在“定时”作业页点击“新增”按钮,创建作业。

定时任务-基本信息

定时任务-计算资源

定时任务-调度计划

        根据定时作业向导创建作业。第一步填写作业基本信息,选中作业运行所需的流程及版本,若作业运行所需的时间比较长,可以增大作业超时时间,缺省为7200秒,即2个小时;第二步为流程变量设置运行值,若流程内未用到变量则跳过此步;第三步,配置流程运行所需的节点资源,可指明节点名称的正则表达式;最后,设置作业的调度周期,缺省采用Cron表达式描述。该表达式拥有丰富的时间周期描述能力,能够满足使用者的各种周期性调度需求。

        定时作业创建完成后,HuggingFists会按照调度计划定期调度执行流程。选中作业,点击查看,可以看到由作业派发运行的所有任务列表。

        点击任务,可以查看任务的运行日志、算子运行状态以及输出结果等信息。这与我们在流程调试时能看到的内容一致。

任务      

        下面进入“任务”界面。在该界面可以对所有流程任务,按类型、运行状态、时间查询统计。帮助使用者对系统中流程任务的运行状况有一个全面的了解。

小结

    作业管理帮助使用者实现流程的自动化运行调度,从而大大提高了数据业务的生产效率。到此为止,HuggingFists的主体功能部分就介绍完了,下面我们将介绍一下工具的支撑功能部分。HuggingFists的支撑功能拥有很好的环境适应性,其能方便、快捷的整合本地以及互联网中的各类能力,从而集中、高效、低成本的解决使用者的各类数据业务需求。

这篇关于HuggingFists系统功能介绍(4)--作业管理的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/746212

相关文章

Python使用FastAPI实现大文件分片上传与断点续传功能

《Python使用FastAPI实现大文件分片上传与断点续传功能》大文件直传常遇到超时、网络抖动失败、失败后只能重传的问题,分片上传+断点续传可以把大文件拆成若干小块逐个上传,并在中断后从已完成分片继... 目录一、接口设计二、服务端实现(FastAPI)2.1 运行环境2.2 目录结构建议2.3 serv

Debian 13升级后网络转发等功能异常怎么办? 并非错误而是管理机制变更

《Debian13升级后网络转发等功能异常怎么办?并非错误而是管理机制变更》很多朋友反馈,更新到Debian13后网络转发等功能异常,这并非BUG而是Debian13Trixie调整... 日前 Debian 13 Trixie 发布后已经有众多网友升级到新版本,只不过升级后发现某些功能存在异常,例如网络转

JWT + 拦截器实现无状态登录系统

《JWT+拦截器实现无状态登录系统》JWT(JSONWebToken)提供了一种无状态的解决方案:用户登录后,服务器返回一个Token,后续请求携带该Token即可完成身份验证,无需服务器存储会话... 目录✅ 引言 一、JWT 是什么? 二、技术选型 三、项目结构 四、核心代码实现4.1 添加依赖(pom

Java中HashMap的用法详细介绍

《Java中HashMap的用法详细介绍》JavaHashMap是一种高效的数据结构,用于存储键值对,它是基于哈希表实现的,提供快速的插入、删除和查找操作,:本文主要介绍Java中HashMap... 目录一.HashMap1.基本概念2.底层数据结构:3.HashCode和equals方法为什么重写Has

基于Python实现自动化邮件发送系统的完整指南

《基于Python实现自动化邮件发送系统的完整指南》在现代软件开发和自动化流程中,邮件通知是一个常见且实用的功能,无论是用于发送报告、告警信息还是用户提醒,通过Python实现自动化的邮件发送功能都能... 目录一、前言:二、项目概述三、配置文件 `.env` 解析四、代码结构解析1. 导入模块2. 加载环

linux系统上安装JDK8全过程

《linux系统上安装JDK8全过程》文章介绍安装JDK的必要性及Linux下JDK8的安装步骤,包括卸载旧版本、下载解压、配置环境变量等,强调开发需JDK,运行可选JRE,现JDK已集成JRE... 目录为什么要安装jdk?1.查看linux系统是否有自带的jdk:2.下载jdk压缩包2.解压3.配置环境

基于Java和FFmpeg实现视频压缩和剪辑功能

《基于Java和FFmpeg实现视频压缩和剪辑功能》在视频处理开发中,压缩和剪辑是常见的需求,本文将介绍如何使用Java结合FFmpeg实现视频压缩和剪辑功能,同时去除数据库操作,仅专注于视频处理,需... 目录引言1. 环境准备1.1 项目依赖1.2 安装 FFmpeg2. 视频压缩功能实现2.1 主要功

使用Python实现无损放大图片功能

《使用Python实现无损放大图片功能》本文介绍了如何使用Python的Pillow库进行无损图片放大,区分了JPEG和PNG格式在放大过程中的特点,并给出了示例代码,JPEG格式可能受压缩影响,需先... 目录一、什么是无损放大?二、实现方法步骤1:读取图片步骤2:无损放大图片步骤3:保存图片三、示php

Springboot项目构建时各种依赖详细介绍与依赖关系说明详解

《Springboot项目构建时各种依赖详细介绍与依赖关系说明详解》SpringBoot通过spring-boot-dependencies统一依赖版本管理,spring-boot-starter-w... 目录一、spring-boot-dependencies1.简介2. 内容概览3.核心内容结构4.

深度解析Python yfinance的核心功能和高级用法

《深度解析Pythonyfinance的核心功能和高级用法》yfinance是一个功能强大且易于使用的Python库,用于从YahooFinance获取金融数据,本教程将深入探讨yfinance的核... 目录yfinance 深度解析教程 (python)1. 简介与安装1.1 什么是 yfinance?