一文总览阿里云存储产品年度升级!
创始人
2025-02-20 20:21:59
0

近日,在“回顾·向新:AI浪潮下的数据存储进化”年度回顾上,阿里云总结了过去一年存储产品在AI领域的研究成果,并分享了在“AI领域”和“高可用底层架构”方面的双管齐下策略。同时,会上分享的CPFS智算版针对模型训练场景进行了全链路性能升级,提供20TB级别的吞吐和3亿IOPS最大性能,将成为AI时代大模型训练任务最具性价比的存储选择。

云存储读写性能再突破,CPFS 支持更快大模型训练

在大型模型训练中,尤其是面对10万GPU的海量计算需求时,存储系统的性能和稳定性至关重要。阿里云的CPFS作为高性能文件存储解决方案,为GPU提供了20TB级别的吞吐和3亿IOPS最大性能,从而显著提升了训练效率。

此外,借助400Gb/s网卡以及RDMA通信的能力,CPFS单客户端吞吐提升至 25GB/s,支持更大及更加频繁的Checkpoint读写;提供burst I/O稳定有效吞吐/低延时,单机提供15GB/s可线性扩展的分布式读缓存能力;支持100GB/s高带宽和OSS的数据流动。CPFS对全链路进行了性能提升,为LLM训练提速。

CPFS 能力全面升级,助力企业加速 AI 发展

OSS 端到端链路升级,支持云上构建两万+数据湖

目前已有超过2万个数据湖基于OSS构建,其中大部分为AI数据湖。会上,阿里云对象存储OSS针对AI领域进行了多项能力更新。本年度,OSS推出OSS Connector for AI/ML,相比传统挂载方式,加载25.6万张图片数据时性能提升14倍。

OSSFS 1.91.3版本针对推理模型文件加载优化,9.3GB大文件加载速度提升 3.6倍,10万个文件list性能提升6倍。在服务端,OSS发布资源池QoS能力,支持多个Bucket共享池化性能,并可针对单Bucket和请求者RAM账号进行QoS 设置,实现削峰填谷,提升资源利用率。同时,OSS加速器产品能力优化,起步容量降低99%,吞吐密度提升50%,最大性能提升2.5倍,达到100GBps。

安全是存储根基,高可用再升级

在安全方面,CPFS持续增强稳定安全和数据保护能力,包括通过Cloud Backup进行备份,应对单AZ故障和数据误删、勒索病毒等事故;新增日志审计,安全访问可追溯;提供目录级配额,简化数据管理;确保安全挂载和IO鉴权,实现端到端的数据隔离;通过Access Point简化数据访问权限管理。

此外,为了协助客户搭建和管理业务高可用架构,阿里云存储针对企业云上资源提供了一系列数据灾备方案,包括企业灾备管理服务数据灾备中心 BDRC,SAAS 化灾备服务云备份以及丰富的 IAAS 层数据灾备的能力,满足从开发者到跨国企业的多样化数据管理需求。

助力千行百业,领跑 AI 时代

过去一年AI渗透进各行各业,企业为了构建高效的AI系统,采集、处理和存储了海量的多模态数据,来加速模型的训练和推理应用,这背后离不开阿里云的助力。

· 月之暗面:在基础大模型领域,CPFS为月暗提供数Tbps级别的吞吐和毫秒级别的读写延时,满足模型checkpoint、多模态数据集和训练日志等场景下极致性能的需求,帮助月暗高效处理和分析大量请求和数据,提升模型的训练效率;

· 小鹏汽车:在小鹏汽车智算模型训练场景,存储产品结合“扶摇”智算集群的优化,使得其自动驾驶模型训练效率提升了170倍,存储吞吐效率提升了40倍,极大地加速了技术研发进程;

· 小红书:对于拥有3.2亿月活跃用户的小红书而言,阿里云的对象存储服务OSS为其提供了超过20Tbps的吞吐能力,保障了海量用户生成内容的处理速度,并通过多存储类型组合方案实现了成本与性能的最佳平衡。

更多阿里云存储产品能力

OSS 快速检测违规内容

OSS 恶意文件检测

Tablestore 多样应用场景

弹性临时盘 同时支持 x86或 ARM 架构

云备份 备份点病毒检测

归档快照 新增直读模式

阿里云智能资深产品专家彭亚雄表示:2025年,阿里云依然会紧密围绕AI智算赛道,聚焦稳定、安全、性能、成本、体验等主要方向,持续产品的创新和进化。让每一家公司,都顺利的从数字化转型,过渡到智能化创新的Data+AI公司,加速业务发展和创新。

相关内容

热门资讯

原创 匈... 好的,我会按照你的要求改写这篇文章,保持每段语义不变,同时增加一些细节描写,字数变化不大。 ---...
魔搭:成立两年半以来托管开源模... 新京报贝壳财经讯(记者罗亦丹)6月30日,阿里云推出的AI大模型开源社区魔搭召开首届开发者大会。阿里...
科学家揭示运动抗衰的分子机制 本报讯(记者王兆昱)中国科学院动物研究所研究员刘光慧、曲静、宋默识联合国家生物信息中心研究员张维绮及...
零部件企业纷纷跨界布局 浙江抢... 日前,五洲新春、浙江荣泰、宁波华翔等多家浙江上市公司纷纷公布人形机器人赛道新进展。上证报记者近日采访...
全球首艘首航成功!“氨晖号”解... 2025年6月28日,全球首艘纯氨燃料内燃机动力示范船“氨晖号”在安徽合肥巢湖水域首航取得成功,标志...
看不见的守护者:空气洁净度检测... 一粒0.5微米的尘埃落在芯片上,可能引发电子设备故障;手术室中每立方米大于0.5微米的尘埃超过352...
萤石推出蓝海大模型2.0,感知... 日前,视觉物联网云平台萤石正式推出萤石蓝海大模型2.0、 EZVIZ HomePlay OS 全栈开...
二七区建新街小学锦旗无言谢师恩 二七区建新街小学锦旗无言谢师恩 大象新闻记者 李书恒 通讯员 徐淑敏/文图 6月30日清晨,二七区建...
Windows留不住人:3年痛... 快科技6月30日消息,微软在近期的一篇关于Windows 10将停止支持的博客文章中指出“今天,Wi...
金马游乐获得发明专利授权:“一... 证券之星消息,根据天眼查APP数据显示金马游乐(300756)新获得一项发明专利授权,专利名为“一种...
从黑板调度到算法协同,网络货运... 编者按 | 为进一步深化数据要素在各领域的创新应用,促进数据要素价值释放,持续挖掘数据要素应用赋能优...
望变电气获得实用新型专利授权:... 证券之星消息,根据天眼查APP数据显示望变电气(603191)新获得一项实用新型专利授权,专利名为“...
阳城县玉米播种迈向智能化 本报讯 连日来,在阳城县润城镇屯城村的高标准农田里,搭载北斗导航系统的三角定苗水肥一体化精播机格外引...
AI技术革新心脏诊疗:量子与人... 谈论AI在医疗保健领域的应用是一码事,但描述这种变革如何发生——身体系统如何与技术相互作用,产生令人...
长春市开展中小学“科普专家进校... 近日,长春市中小学“科普专家进校园”航空航天专题科普活动开展。活动邀请中国人民解放军空军航空大学教员...
马斯克确认:人形机器人Opti... 6月27日消息,据外媒报道,特斯拉首席执行官埃隆·马斯克确认,人形机器人擎天柱V3已经启用了Grok...
从实验室到万亿赛道,这位院士要... 近日,民航局发布《民用无人驾驶航空器系统分布式操作自动化等级测试》,中航无人机、亿航、迅蚁、美团、拓...
DeepSeek在德国面临苹果... 通信世界网消息(CWW)近日,据外媒报道,德国一家数据保护监管机构要求苹果公司和谷歌考虑在该国应用商...
打破国外长期垄断局面 【深圳商报讯】(记者 张妍)近日,我国高性能硅光电倍增器(SiPM)国产化取得重大突破。记者从中广核...
“空中运输”解公路边坡隐患处置... 一架双轴四旋翼无人机在235国道溪南镇后溪段腾空而起,仅用两三分钟,便将100公斤施工材料精准运抵4...