IBM Spectrum LSF 作业调度系统,简化计算集群管理并划分工作负载优先级

本文主要是介绍IBM Spectrum LSF 作业调度系统,简化计算集群管理并划分工作负载优先级,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

IBM Spectrum LSF 作业调度系统,简化计算集群管理并划分工作负载优先级

要点  

通过隐藏工作负载密集型计算环境的复杂性,提高用户生产效率;

简化计算集群管理并划分工作负载优先级, 以快速满足竞争激烈的行业瞬息万变的需求;

通过优化系统的利用率,最大限度提高投资回报率 (ROI)。

高性能计算 (HPC) 不再只是适用于大型组织和技术技能熟练的用户。 在当今竞争激烈的商业环境中,几乎每个行业都要求缩短设计周期并实现 更高质量的成果,HPC 适合任何规模的组织。它适合需要分析海量数据 并从中获得答案的用户。不过,就 HPC 环境所做工作和完成这些工作所 需计算基础架构的性质而言,HPC 是复杂的。这意味着组织需要有效的 工具让 HPC 基础架构更易于使用和管理并对工作划分优先级,从而最大限度地提高 HPC 基础架构的价值。

IBM® Spectrum™ LSF Suites 提供高度集成的解决方案,从而提供组织所需的系统管理和工作负载优先级处理功能,同时通过隐藏复杂性帮助提高用户生产效率。

在当今的世界,当简单地部署工作负载调度器无法满足需求时, IBM Spectrum LSF Suites 可以帮助满足 HPC 环境面临的一系列需求。 对于用户,它可以帮助利用各种技术,例如旨在加速取得成果的加速器。 对于基础架构,它可以帮助在工作负载峰值期间充分利用云中可用的额外计算容量。对于组织,它可以帮助应对推动各个项目和整个企业的优先事 项不断转变的市场变化。与此同时,它可以帮助降低成本和提高 ROI。

IBM Spectrum LSF Suites 以三种方式满足日益增长的 HPC 需求

随着来自大数据源和物联网的信息增长,各种规模和类型的组织加入了采用 HPC 的传统用户的行列,例如科学研究者、 大学和政府。到 2021 年,预计 HPC 环境存储市场将较 2016 年实现 7.8% 的年复合增长率,服务器市场将增长 5.8%。

为了满足这些需求,IBM Spectrum LSF Suites 旨在提供从海量 数据提取意义的新方法,从而降低处理延迟,并加速应用。 实现核心管理和优先级处理功能是所有安装的核心工作,IBM Spectrum LSF Suites 提供三个版本,功能逐渐增强: “Workgroup”,可扩展至多达 128 个节点;“HPC”,可扩展至 多达 1,024 个节点;“Enterprise”,不存在节点限制。

让用户、IT 和业务充分利用 HPC

HPC 环境中的硬件质量非常重要,而 HPC 基础架构的真正价值来自于组织可以从中获得什么,包括减少产品开发和研究所需要的时间,或改善使用它的人员的资源访问和运营效力。不 过,在许多情况下,随着 HPC 环境规模的扩大和复杂性的提高,这种价值变得越来越难以实现。

IBM Spectrum LSF Suites 让组织可以通过隐藏复杂性等手段实现价值,它的接口支持作为现场专家而非技术专家(工程师或内 科医生等)的用户快速、轻松地访问数据,以执行研究和分析。 它让技术团队可以监测集群、作业和日志,并将它们的使用情况报告给经理和利益相关方。该解决方案还支持用户通过面向 Microsoft Windows 环境的高度集成的客户端和面向 Google Android 和 Apple iOS 平台的移动客户端,与集群进行交互。

智能的数据暂存有助于确保用户在需要时可以获得他们需要的信息。利用 IBM Spectrum LSF Suites,在分配作业前传输数 据,让用户可以在他们占用计算资源时避免在暂存数据的作业。这可以提高集群利用率。此外,当多个作业需要相同信息时,仅从数据源位置传输数据一次,然后缓存数据。这有助于改善吞吐量,并可以降低数据传输总成本。

智能响应不断变化的业务需求

企业 HPC 意味着高资源需求、各种不同的用户群体运行在不同的应用上。这通常导致需求出现峰值和低谷。随着峰值成为 一条直线并超过总的计算和存储容量,可能会发生严重的资源短缺和更长的解决时间。为了应对这个挑战,IBM Spectrum LSF Suites 可以动态地配置来自 IBM Cloud™ 等许多不同云提供商的外部云资源,直到峰值负载消退。这让计算容量可以根据需求扩大和缩小,因此您只需为您使用的容量付费。

轻松利用新技术

图形处理单元 (GPU) 加速的计算现在在企业 HPC 环境中随处 可见,GPU 支持正在出现在数量不断增长的应用之中。与计算环境中的任何其他资源一样,GPU 必须得到智能管理以实现最大效力。从 NVIDIA GPU 配置到支持,IBM Spectrum LSF Suites 提供简化的体验,让用户可以更快地提高生产效率。NVIDIA GPU 在 IBM Spectrum LSF Suites 中得到自动检测和配置,大幅简化了 GPU 服务器的管理工作。此外,凭借对 NVIDIA DCGM 的支持,IBM Spectrum LSF Suites 提供了 许多先进功能,包括 NVIDIA GPU 行为监测、运行情况和诊断以及 GPU 工作负载的记账和流程统计。这些功能有助于组织充分利用他们的异构计算基础架构。

IBM Spectrum LSF Suites 还向采用容器技术的组织提供支持, 帮助简化应用程序的构建、测试和发运,让应用程序堆栈一致地部署在组织内部和云中。IBM Spectrum LSF Suites 还提供通用接口,支持 Docker、Shifter 和 Singularity 容器技术。提交 到 IBM Spectrum LSF Suites 的容器化作业受益于资源绑定、 交互式并行作业支持,以及在故障期间重新运行容器带来的可靠性。利用访问控制定义什么容器映像可在环境中运行,则可以让组织更加高枕无忧。

最终,IBM Spectrum LSF Suites 向其核心时间安排和管理功能添加的能力,可以提高整个环境的生产效率。复杂的 HPC 环境可能维护成本高昂,IT 团队生产效率的提升有助于降低成本。用户界面降低出现代价高昂的最终用户错误的几率, 帮助用户更快提高生产效率,并让用户可以专注于成果而非如何使用环境。

"过去十年,IBM Spectrum Computing 软件对于我们在一级方程式赛车取得的成功起到关键作用。红牛车队利用计算流体动力学 (CFD) 优化空气动力学表现。IBM Spectrum LSF 为管理复杂工作流程提供易于使用的界面。这让 我们的空气动力学家可以专注于汽车设计的 CFD,而非执行具体的手动步骤。这种水平的简化和自动化将培训 时间从数天缩短至数小时,并让新用户能以破纪录的速度运行完整的 CFD 工作流程。"

—Matt Cadieux,红牛车队 CIO

这篇关于IBM Spectrum LSF 作业调度系统,简化计算集群管理并划分工作负载优先级的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/369543

相关文章

Windows系统宽带限制如何解除?

《Windows系统宽带限制如何解除?》有不少用户反映电脑网速慢得情况,可能是宽带速度被限制的原因,只需解除限制即可,具体该如何操作呢?本文就跟大家一起来看看Windows系统解除网络限制的操作方法吧... 有不少用户反映电脑网速慢得情况,可能是宽带速度被限制的原因,只需解除限制即可,具体该如何操作呢?本文

windows和Linux使用命令行计算文件的MD5值

《windows和Linux使用命令行计算文件的MD5值》在Windows和Linux系统中,您可以使用命令行(终端或命令提示符)来计算文件的MD5值,文章介绍了在Windows和Linux/macO... 目录在Windows上:在linux或MACOS上:总结在Windows上:可以使用certuti

CentOS和Ubuntu系统使用shell脚本创建用户和设置密码

《CentOS和Ubuntu系统使用shell脚本创建用户和设置密码》在Linux系统中,你可以使用useradd命令来创建新用户,使用echo和chpasswd命令来设置密码,本文写了一个shell... 在linux系统中,你可以使用useradd命令来创建新用户,使用echo和chpasswd命令来设

电脑找不到mfc90u.dll文件怎么办? 系统报错mfc90u.dll丢失修复的5种方案

《电脑找不到mfc90u.dll文件怎么办?系统报错mfc90u.dll丢失修复的5种方案》在我们日常使用电脑的过程中,可能会遇到一些软件或系统错误,其中之一就是mfc90u.dll丢失,那么,mf... 在大部分情况下出现我们运行或安装软件,游戏出现提示丢失某些DLL文件或OCX文件的原因可能是原始安装包

电脑显示mfc100u.dll丢失怎么办?系统报错mfc90u.dll丢失5种修复方案

《电脑显示mfc100u.dll丢失怎么办?系统报错mfc90u.dll丢失5种修复方案》最近有不少兄弟反映,电脑突然弹出“mfc100u.dll已加载,但找不到入口点”的错误提示,导致一些程序无法正... 在计算机使用过程中,我们经常会遇到一些错误提示,其中最常见的就是“找不到指定的模块”或“缺少某个DL

gradle第三方Jar包依赖统一管理方式

《gradle第三方Jar包依赖统一管理方式》:本文主要介绍gradle第三方Jar包依赖统一管理方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录背景实现1.顶层模块build.gradle添加依赖管理插件2.顶层模块build.gradle添加所有管理依赖包

基于Python打造一个智能单词管理神器

《基于Python打造一个智能单词管理神器》这篇文章主要为大家详细介绍了如何使用Python打造一个智能单词管理神器,从查询到导出的一站式解决,感兴趣的小伙伴可以跟随小编一起学习一下... 目录1. 项目概述:为什么需要这个工具2. 环境搭建与快速入门2.1 环境要求2.2 首次运行配置3. 核心功能使用指

Java 中的 @SneakyThrows 注解使用方法(简化异常处理的利与弊)

《Java中的@SneakyThrows注解使用方法(简化异常处理的利与弊)》为了简化异常处理,Lombok提供了一个强大的注解@SneakyThrows,本文将详细介绍@SneakyThro... 目录1. @SneakyThrows 简介 1.1 什么是 Lombok?2. @SneakyThrows

HTML5中的Microdata与历史记录管理详解

《HTML5中的Microdata与历史记录管理详解》Microdata作为HTML5新增的一个特性,它允许开发者在HTML文档中添加更多的语义信息,以便于搜索引擎和浏览器更好地理解页面内容,本文将探... 目录html5中的Mijscrodata与历史记录管理背景简介html5中的Microdata使用M

Spring 基于XML配置 bean管理 Bean-IOC的方法

《Spring基于XML配置bean管理Bean-IOC的方法》:本文主要介绍Spring基于XML配置bean管理Bean-IOC的方法,本文给大家介绍的非常详细,对大家的学习或工作具有一... 目录一. spring学习的核心内容二. 基于 XML 配置 bean1. 通过类型来获取 bean2. 通过