优刻得公有云并行文件存储UPFS,正式公测!

2024-06-20 12:52

本文主要是介绍优刻得公有云并行文件存储UPFS,正式公测!,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

为了满足市场对高效存储的迫切需求,优刻得公有云并行文件存储UPFS,现正式公测!延续私有化的高性能、高可靠、易用性,灵活应对客户的弹性诉求。

随着2024年大模型技术的广泛应用,整个AI生态正逐步向产业链深度融合。对于众多中小AI企业来说,算力资源的投入仍是一笔不小的开销。因此,在IaaS资源的选择上,企业更加倾向于成本效益高、弹性计算能力强的解决方案,而公有云无疑是他们的重要选择。

延续私有云,5大产品特性应对AI存储挑战

当前,AIGC发展依旧迅猛,也带动了全行业对数据服务板块的强烈需求,尤其是在多模态数据集的处理方面。为了使训练问答和产出达到预期效果,数据提供方必须确保数据的即时性和有效性。
UPFS是优刻得自主研发的高性能并行文件系统,旨在满足数据访问速度、可扩展性和可靠性的极致要求。通过创新设计,UPFS在元数据管理和数据存储引擎等方面实现了突破,具备最高每秒TB级吞吐、千万级IOPS的能力的同时,还可以保障亚毫秒级的时延,这使其成为人工智能大模型训练、自动驾驶、电子设计自动化仿真及计算机图形渲染等领域的理想存储方案。

高性能:支持POSIX协议的自研客户端,能够发挥底层资源的极限性能,数据路由算法采用高效的一致性哈希算法,缩短了IO路径,单个文件系统的吞吐最高可扩展至TB/s,IOPS最高可达千万级,时延可稳定在亚毫秒级别。

高可用:

1.存储节点高可用:多个存储节点构成存储集群,实现数据分布和负载均衡。2.数据存储高可用:数据存储采用分布式存储方案,支持多副本、数据均衡存储和故障自恢复,保障数据的完整性和可用性。3.元数据高可用:采用分布式架构存储文件系统元数据,多节点、多副本机制保证元数据服务高可用。并且所有节点均可处理元数据请求,防止元数据热点,提高整体集群的元数据OPS,分散开之后的元数据请求能够充分发挥每一个元数据节点的性能。

弹性扩容:扩容对使用文件存储的应用无感知。单个文件系统公测期目前支持最大10PiB级容量。

数据共享:通过挂载的方式,允许在同一个项目内的任意主机,都可以访问指定文件系统,从而达到数据共享的目的。文件存储不会限制可挂载文件系统的主机个数,这对需要大量节点进行共享数据处理的场景更加友好。

易用性:可以通过控制台方便地进行创建、扩容、删除等操作。并且由于文件存储支持 POSIX协议,让基于POSIX的应用能够无缝地对接文件存储产品。各类文件系统管理工具都可以直接使用,不需要对以往的开发和运维习惯做任何改变。

UPFS公测地域为华北二(乌兰察布),以100TiB文件系统为例,读吞吐最大可达60GB/s、写吞吐最大可达20GB/s;读IOPS 最大可达1200w、写IOPS最大可达 400w;平均单路4k读延迟0.25ms、平均单路4k写延迟0.3ms。

公测期间,支持POSIX协议,享受500MB/s/TiB基线版本。公测期部署的集群规模有限,吞吐和带宽会随容量线性提升,若想试用最高TB/s的吞吐,可通过文末联系优刻得技术支持团队。

抢先体验公有云UPFS

这篇关于优刻得公有云并行文件存储UPFS,正式公测!的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1078188

相关文章

SpringBoot3.X 整合 MinIO 存储原生方案

《SpringBoot3.X整合MinIO存储原生方案》本文详细介绍了SpringBoot3.X整合MinIO的原生方案,从环境搭建到核心功能实现,涵盖了文件上传、下载、删除等常用操作,并补充了... 目录SpringBoot3.X整合MinIO存储原生方案:从环境搭建到实战开发一、前言:为什么选择MinI

Python实现对阿里云OSS对象存储的操作详解

《Python实现对阿里云OSS对象存储的操作详解》这篇文章主要为大家详细介绍了Python实现对阿里云OSS对象存储的操作相关知识,包括连接,上传,下载,列举等功能,感兴趣的小伙伴可以了解下... 目录一、直接使用代码二、详细使用1. 环境准备2. 初始化配置3. bucket配置创建4. 文件上传到os

Java中调用数据库存储过程的示例代码

《Java中调用数据库存储过程的示例代码》本文介绍Java通过JDBC调用数据库存储过程的方法,涵盖参数类型、执行步骤及数据库差异,需注意异常处理与资源管理,以优化性能并实现复杂业务逻辑,感兴趣的朋友... 目录一、存储过程概述二、Java调用存储过程的基本javascript步骤三、Java调用存储过程示

MySQL之InnoDB存储引擎中的索引用法及说明

《MySQL之InnoDB存储引擎中的索引用法及说明》:本文主要介绍MySQL之InnoDB存储引擎中的索引用法及说明,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐... 目录1、背景2、准备3、正篇【1】存储用户记录的数据页【2】存储目录项记录的数据页【3】聚簇索引【4】二

MySQL之InnoDB存储页的独立表空间解读

《MySQL之InnoDB存储页的独立表空间解读》:本文主要介绍MySQL之InnoDB存储页的独立表空间,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录1、背景2、独立表空间【1】表空间大小【2】区【3】组【4】段【5】区的类型【6】XDES Entry区结构【

SQLite3 在嵌入式C环境中存储音频/视频文件的最优方案

《SQLite3在嵌入式C环境中存储音频/视频文件的最优方案》本文探讨了SQLite3在嵌入式C环境中存储音视频文件的优化方案,推荐采用文件路径存储结合元数据管理,兼顾效率与资源限制,小文件可使用B... 目录SQLite3 在嵌入式C环境中存储音频/视频文件的专业方案一、存储策略选择1. 直接存储 vs

MySQL存储过程之循环遍历查询的结果集详解

《MySQL存储过程之循环遍历查询的结果集详解》:本文主要介绍MySQL存储过程之循环遍历查询的结果集,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录前言1. 表结构2. 存储过程3. 关于存储过程的SQL补充总结前言近来碰到这样一个问题:在生产上导入的数据发现

MySQL 存储引擎 MyISAM详解(最新推荐)

《MySQL存储引擎MyISAM详解(最新推荐)》使用MyISAM存储引擎的表占用空间很小,但是由于使用表级锁定,所以限制了读/写操作的性能,通常用于中小型的Web应用和数据仓库配置中的只读或主要... 目录mysql 5.5 之前默认的存储引擎️‍一、MyISAM 存储引擎的特性️‍二、MyISAM 的主

Linux lvm实例之如何创建一个专用于MySQL数据存储的LVM卷组

《Linuxlvm实例之如何创建一个专用于MySQL数据存储的LVM卷组》:本文主要介绍使用Linux创建一个专用于MySQL数据存储的LVM卷组的实例,具有很好的参考价值,希望对大家有所帮助,... 目录在Centos 7上创建卷China编程组并配置mysql数据目录1. 检查现有磁盘2. 创建物理卷3. 创

使用Python实现调用API获取图片存储到本地的方法

《使用Python实现调用API获取图片存储到本地的方法》开发一个自动化工具,用于从JSON数据源中提取图像ID,通过调用指定API获取未经压缩的原始图像文件,并确保下载结果与Postman等工具直接... 目录使用python实现调用API获取图片存储到本地1、项目概述2、核心功能3、环境准备4、代码实现