1 Kubeflow总体介绍-学习笔记

2024-08-22 02:52

本文主要是介绍1 Kubeflow总体介绍-学习笔记,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

1 什么是 Kubeflow

Kubeflow 是一个开源项目社区和生态系统,支持机器学习 (ML) 生命周期中的每个阶段 ,并支持相关的开源 工具和框架,Kubeflow 使 Kubernetes 上的 AI/ML 变得简单、可移植且可扩展。

Kubeflow 都能提供模块化、可扩展的工具,满足机器学习生命周期的各个方面:从构建机器学习模型到将其部署到人工智能应用程序的生产中。

2 Kubeflow 概览图

下图展示了覆盖 Kubernetes 上 ML 生命周期每个阶段的主要 Kubeflow 组件
在这里插入图片描述

3 三个原则

3.1可组合性

不同的处理阶段需要不同的组件,需要能够安装整合这些不同处理阶段的工具:
在这里插入图片描述

3.2 可移植性

工程师和科学家只需要关注主体逻辑和代码,一次性编码,就可以将数据迁移到在支持kubeflow的任何环境中运行ML的服务
在这里插入图片描述

3.3 可扩展性

训练平台可以访问更多的处理资源,并且可以动态的调整,以在不需要时即使释放减少成本;Kubeflow使用Kubenetes内置功能来及时调整资源利用。
在这里插入图片描述

4 Kubeflow优势

目标是让 Kubernetes 发挥其优势,让扩展机器学习(ML)模型并将其部署到生产中变得尽可能简单:
· 在多样化的基础架构上轻松、可重复、可移植地部署(例如,在笔记本电脑上进行实验,然后转移到本地集群或云端)
· 部署和管理松耦合的微服务
· 根据需求扩展

5 历史

Kubeflow 最初是 Google 内部运行TensorFlow方式的开源版本,基于名为TensorFlow Extended 的管道。它最初只是在 Kubernetes 上运行 TensorFlow 作业的一种简单方法,但后来扩展为运行端到端机器学习工作流的多架构、多云框架。

这篇关于1 Kubeflow总体介绍-学习笔记的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1095033

相关文章

C#使用StackExchange.Redis实现分布式锁的两种方式介绍

《C#使用StackExchange.Redis实现分布式锁的两种方式介绍》分布式锁在集群的架构中发挥着重要的作用,:本文主要介绍C#使用StackExchange.Redis实现分布式锁的... 目录自定义分布式锁获取锁释放锁自动续期StackExchange.Redis分布式锁获取锁释放锁自动续期分布式

Java学习手册之Filter和Listener使用方法

《Java学习手册之Filter和Listener使用方法》:本文主要介绍Java学习手册之Filter和Listener使用方法的相关资料,Filter是一种拦截器,可以在请求到达Servl... 目录一、Filter(过滤器)1. Filter 的工作原理2. Filter 的配置与使用二、Listen

redis过期key的删除策略介绍

《redis过期key的删除策略介绍》:本文主要介绍redis过期key的删除策略,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录第一种策略:被动删除第二种策略:定期删除第三种策略:强制删除关于big key的清理UNLINK命令FLUSHALL/FLUSHDB命

Pytest多环境切换的常见方法介绍

《Pytest多环境切换的常见方法介绍》Pytest作为自动化测试的主力框架,如何实现本地、测试、预发、生产环境的灵活切换,本文总结了通过pytest框架实现自由环境切换的几种方法,大家可以根据需要进... 目录1.pytest-base-url2.hooks函数3.yml和fixture结论你是否也遇到过

利用Python快速搭建Markdown笔记发布系统

《利用Python快速搭建Markdown笔记发布系统》这篇文章主要为大家详细介绍了使用Python生态的成熟工具,在30分钟内搭建一个支持Markdown渲染、分类标签、全文搜索的私有化知识发布系统... 目录引言:为什么要自建知识博客一、技术选型:极简主义开发栈二、系统架构设计三、核心代码实现(分步解析

MySQL中慢SQL优化的不同方式介绍

《MySQL中慢SQL优化的不同方式介绍》慢SQL的优化,主要从两个方面考虑,SQL语句本身的优化,以及数据库设计的优化,下面小编就来给大家介绍一下有哪些方式可以优化慢SQL吧... 目录避免不必要的列分页优化索引优化JOIN 的优化排序优化UNION 优化慢 SQL 的优化,主要从两个方面考虑,SQL 语

C++中函数模板与类模板的简单使用及区别介绍

《C++中函数模板与类模板的简单使用及区别介绍》这篇文章介绍了C++中的模板机制,包括函数模板和类模板的概念、语法和实际应用,函数模板通过类型参数实现泛型操作,而类模板允许创建可处理多种数据类型的类,... 目录一、函数模板定义语法真实示例二、类模板三、关键区别四、注意事项 ‌在C++中,模板是实现泛型编程

Python实现html转png的完美方案介绍

《Python实现html转png的完美方案介绍》这篇文章主要为大家详细介绍了如何使用Python实现html转png功能,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 1.增强稳定性与错误处理建议使用三层异常捕获结构:try: with sync_playwright(

Java使用多线程处理未知任务数的方案介绍

《Java使用多线程处理未知任务数的方案介绍》这篇文章主要为大家详细介绍了Java如何使用多线程实现处理未知任务数,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 知道任务个数,你可以定义好线程数规则,生成线程数去跑代码说明:1.虚拟线程池:使用 Executors.newVir

Java进阶学习之如何开启远程调式

《Java进阶学习之如何开启远程调式》Java开发中的远程调试是一项至关重要的技能,特别是在处理生产环境的问题或者协作开发时,:本文主要介绍Java进阶学习之如何开启远程调式的相关资料,需要的朋友... 目录概述Java远程调试的开启与底层原理开启Java远程调试底层原理JVM参数总结&nbsMbKKXJx