优刻得公有云并行文件存储UPFS,正式公测!

2024-06-20 12:52

本文主要是介绍优刻得公有云并行文件存储UPFS,正式公测!,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

为了满足市场对高效存储的迫切需求,优刻得公有云并行文件存储UPFS,现正式公测!延续私有化的高性能、高可靠、易用性,灵活应对客户的弹性诉求。

随着2024年大模型技术的广泛应用,整个AI生态正逐步向产业链深度融合。对于众多中小AI企业来说,算力资源的投入仍是一笔不小的开销。因此,在IaaS资源的选择上,企业更加倾向于成本效益高、弹性计算能力强的解决方案,而公有云无疑是他们的重要选择。

延续私有云,5大产品特性应对AI存储挑战

当前,AIGC发展依旧迅猛,也带动了全行业对数据服务板块的强烈需求,尤其是在多模态数据集的处理方面。为了使训练问答和产出达到预期效果,数据提供方必须确保数据的即时性和有效性。
UPFS是优刻得自主研发的高性能并行文件系统,旨在满足数据访问速度、可扩展性和可靠性的极致要求。通过创新设计,UPFS在元数据管理和数据存储引擎等方面实现了突破,具备最高每秒TB级吞吐、千万级IOPS的能力的同时,还可以保障亚毫秒级的时延,这使其成为人工智能大模型训练、自动驾驶、电子设计自动化仿真及计算机图形渲染等领域的理想存储方案。

高性能:支持POSIX协议的自研客户端,能够发挥底层资源的极限性能,数据路由算法采用高效的一致性哈希算法,缩短了IO路径,单个文件系统的吞吐最高可扩展至TB/s,IOPS最高可达千万级,时延可稳定在亚毫秒级别。

高可用:

1.存储节点高可用:多个存储节点构成存储集群,实现数据分布和负载均衡。2.数据存储高可用:数据存储采用分布式存储方案,支持多副本、数据均衡存储和故障自恢复,保障数据的完整性和可用性。3.元数据高可用:采用分布式架构存储文件系统元数据,多节点、多副本机制保证元数据服务高可用。并且所有节点均可处理元数据请求,防止元数据热点,提高整体集群的元数据OPS,分散开之后的元数据请求能够充分发挥每一个元数据节点的性能。

弹性扩容:扩容对使用文件存储的应用无感知。单个文件系统公测期目前支持最大10PiB级容量。

数据共享:通过挂载的方式,允许在同一个项目内的任意主机,都可以访问指定文件系统,从而达到数据共享的目的。文件存储不会限制可挂载文件系统的主机个数,这对需要大量节点进行共享数据处理的场景更加友好。

易用性:可以通过控制台方便地进行创建、扩容、删除等操作。并且由于文件存储支持 POSIX协议,让基于POSIX的应用能够无缝地对接文件存储产品。各类文件系统管理工具都可以直接使用,不需要对以往的开发和运维习惯做任何改变。

UPFS公测地域为华北二(乌兰察布),以100TiB文件系统为例,读吞吐最大可达60GB/s、写吞吐最大可达20GB/s;读IOPS 最大可达1200w、写IOPS最大可达 400w;平均单路4k读延迟0.25ms、平均单路4k写延迟0.3ms。

公测期间,支持POSIX协议,享受500MB/s/TiB基线版本。公测期部署的集群规模有限,吞吐和带宽会随容量线性提升,若想试用最高TB/s的吞吐,可通过文末联系优刻得技术支持团队。

抢先体验公有云UPFS

这篇关于优刻得公有云并行文件存储UPFS,正式公测!的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1078188

相关文章

MyBatis/MyBatis-Plus同事务循环调用存储过程获取主键重复问题分析及解决

《MyBatis/MyBatis-Plus同事务循环调用存储过程获取主键重复问题分析及解决》MyBatis默认开启一级缓存,同一事务中循环调用查询方法时会重复使用缓存数据,导致获取的序列主键值均为1,... 目录问题原因解决办法如果是存储过程总结问题myBATis有如下代码获取序列作为主键IdMappe

k8s搭建nfs共享存储实践

《k8s搭建nfs共享存储实践》本文介绍NFS服务端搭建与客户端配置,涵盖安装工具、目录设置及服务启动,随后讲解K8S中NFS动态存储部署,包括创建命名空间、ServiceAccount、RBAC权限... 目录1. NFS搭建1.1 部署NFS服务端1.1.1 下载nfs-utils和rpcbind1.1

Redis高性能Key-Value存储与缓存利器常见解决方案

《Redis高性能Key-Value存储与缓存利器常见解决方案》Redis是高性能内存Key-Value存储系统,支持丰富数据类型与持久化方案(RDB/AOF),本文给大家介绍Redis高性能Key-... 目录Redis:高性能Key-Value存储与缓存利器什么是Redis?为什么选择Redis?Red

MyBatis-plus处理存储json数据过程

《MyBatis-plus处理存储json数据过程》文章介绍MyBatis-Plus3.4.21处理对象与集合的差异:对象可用内置Handler配合autoResultMap,集合需自定义处理器继承F... 目录1、如果是对象2、如果需要转换的是List集合总结对象和集合分两种情况处理,目前我用的MP的版本

Java Stream 并行流简介、使用与注意事项小结

《JavaStream并行流简介、使用与注意事项小结》Java8并行流基于StreamAPI,利用多核CPU提升计算密集型任务效率,但需注意线程安全、顺序不确定及线程池管理,可通过自定义线程池与C... 目录1. 并行流简介​特点:​2. 并行流的简单使用​示例:并行流的基本使用​3. 配合自定义线程池​示

从原理到实战解析Java Stream 的并行流性能优化

《从原理到实战解析JavaStream的并行流性能优化》本文给大家介绍JavaStream的并行流性能优化:从原理到实战的全攻略,本文通过实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的... 目录一、并行流的核心原理与适用场景二、性能优化的核心策略1. 合理设置并行度:打破默认阈值2. 避免装箱

使用SpringBoot+InfluxDB实现高效数据存储与查询

《使用SpringBoot+InfluxDB实现高效数据存储与查询》InfluxDB是一个开源的时间序列数据库,特别适合处理带有时间戳的监控数据、指标数据等,下面详细介绍如何在SpringBoot项目... 目录1、项目介绍2、 InfluxDB 介绍3、Spring Boot 配置 InfluxDB4、I

SpringBoot3.X 整合 MinIO 存储原生方案

《SpringBoot3.X整合MinIO存储原生方案》本文详细介绍了SpringBoot3.X整合MinIO的原生方案,从环境搭建到核心功能实现,涵盖了文件上传、下载、删除等常用操作,并补充了... 目录SpringBoot3.X整合MinIO存储原生方案:从环境搭建到实战开发一、前言:为什么选择MinI

Python实现对阿里云OSS对象存储的操作详解

《Python实现对阿里云OSS对象存储的操作详解》这篇文章主要为大家详细介绍了Python实现对阿里云OSS对象存储的操作相关知识,包括连接,上传,下载,列举等功能,感兴趣的小伙伴可以了解下... 目录一、直接使用代码二、详细使用1. 环境准备2. 初始化配置3. bucket配置创建4. 文件上传到os

Java中调用数据库存储过程的示例代码

《Java中调用数据库存储过程的示例代码》本文介绍Java通过JDBC调用数据库存储过程的方法,涵盖参数类型、执行步骤及数据库差异,需注意异常处理与资源管理,以优化性能并实现复杂业务逻辑,感兴趣的朋友... 目录一、存储过程概述二、Java调用存储过程的基本javascript步骤三、Java调用存储过程示