一文总览阿里云存储产品年度晋级

来源:e星体育    发布时间:2025-04-04 00:56:47 点击:1次

  今天,在“回忆·向新:AI浪潮下的数据存储进化”年度回忆上,阿里云总结了曩昔一年存储产品在AI范畴的研究成果,并同享了在“AI范畴”和“高可用底层架构”方面的左右开弓战略。一起,会上同享的CPFS智算版针对模型练习场景进行了全链路功能晋级,供给20TB等级的吞吐和3亿IOPS最大功能,将成为AI年代大模型练习任务最具性价比的存储挑选。

  在大型模型练习中,尤其是面临10万GPU的海量核算需求时,存储体系的功能和安稳才能至关重要。阿里云的CPFS作为高功能文件存储解决计划,为GPU供给了20TB等级的吞吐和3亿IOPS最大功能,然后显着提高了练习功率。

  此外,凭借400Gb/s网卡以及RDMA通讯的才能,CPFS单客户端吞吐提高至 25GB/s,支撑更大及愈加频频的Checkpoint读写;供给burst I/O安稳有用吞吐/低延时,单机供给15GB/s可线性扩展的分布式读缓存才能;支撑100GB/s高带宽和OSS的数据活动。CPFS对全链路进行了功能提高,为LLM练习提速。

  现在已有超越2万个数据湖根据OSS构建,其间大部分为AI数据湖。会上,阿里云目标存储OSS针对AI范畴进行了多项才能更新。本年度,OSS推出OSS Connector for AI/ML,比较传统挂载方法,加载25.6万图片数据时功能提高14倍。

  OSSFS 1.91.3版别针对推理模型文件加载优化,9.3GB大文件加载速度提高 3.6倍,10万个文件list功能提高6倍。在服务端,OSS发布资源池QoS才能,支撑多个Bucket同享池化功能,并可针对单Bucket和恳求者RAM账号进行QoS 设置,完成削峰填谷,提高资源利用率。一起,OSS加快器产品才能优化,起步容量下降99%,吞吐密度提高50%,最大功能提高2.5倍,到达100GBps。

  在安全方面,CPFS继续增强安稳安全和数据维护才能,包含经过Cloud Backup进行备份,应对单AZ毛病和数据误删、勒索病毒等事端;新增日志审计,安全拜访可追溯;供给目录级配额,简化数据办理;确保安全挂载和IO鉴权,完成端到端的数据阻隔;经过Access Point简化数据拜访权限办理。

  此外,为了帮忙客户搭建和办理事务高可用架构,阿里云存储针对企业云上资源供给了一系列数据灾备计划,包含企业灾备办理服务数据灾备中心BDRC,SAAS化灾备服务云备份以及丰厚的IAAS层数据灾备的才能,满意从开发者到跨国企业的多样化数据办理需求。

  曩昔一年AI渗透进各行各业,企业为了构建高效的AI体系,收集、处理和存储了海量的多模态数据,来加快模型的练习和推理使用,这背面离不开阿里云的助力。

  月之暗面:在根底大模型范畴,CPFS为月暗供给数Tbps等级的吞吐和毫秒等级的读写延时,满意模型checkpoint、多模态数据集和练习日志等场景下极致功能的需求,协助月暗高效处理和剖析很多恳求和数据,提高模型的练习功率;

  小鹏轿车:在小鹏轿车智算模型练习场景,存储产品结合“扶摇”智算集群的优化,使得其无人驾驶模型练习功率提高了170倍,存储吞吐功率提高了40倍,极大地加快了研制技能进程;

  小红书:关于具有3.2亿月活泼用户的小红书而言,阿里云的目标存储服务 OSS为其供给了超越20Tbps的吞吐才能,保证了海量用户生成内容的处理速度,并经过多存储类型组合计划完成了本钱与功能的最佳平衡。

  阿里云智能资深产品专家彭亚雄表明:2025年,阿里云仍然会严密环绕AI智算赛道,聚集安稳、安全、功能、本钱、体会等首要方向,继续产品的立异和进化。让每一个企业,都顺畅的从数字化转型,过渡到智能化立异的Data+AI公司,加快事务开展和立异。

上一篇:被娇妻卖掉绝版赛车!身价百亿都督朱兆祥谈爱上胡静的三个理由
下一篇:阿里云推出安全容器专利助力云计算安全新阶段