阿里云AI基础设施升级亮相,模型算力利用率提升超20%
来源:龙8国际 更新时间:2024-11-02 04:29:07
9月20日,阿里2024云栖大会现场,云A用率阿里云全面展示了全新升级后的基级亮AI Infra系列产品及能力。通过全栈优化,础设超阿里云打造出一套稳定和高效的施升AI基础设施,连续训练有效时长大于99%,相模型算模型算力利用率提升20%以上。力利
“AI创新需要新形态的云基础设施。”阿里云副总裁、阿里弹性计算及存储产品线负责人吴结生表示,云A用率阿里云整合底层的基级亮计算、存储、础设超网络等资源,施升实现了统一调度和软硬一体优化,相模型算以满足模型训练和推理的力利爆发式AI算力需求。
基于全新的CIPU2.0,阿里云新推出磐久AI服务器,实现单机16卡、显存1.5T以上,支持Solar RDMA互联。磐久AI服务器采用超钛金电源实现97%以上的高能效,并可通过AI算法预测GPU故障,准确率达92%,保障 AI 算力的性能和稳定性。
在存储方面,阿里云并行文件存储CPFS实现端到端全链路性能提升,单客户端吞吐达25GB/s,高性能数据流动达到100GB/s,为AI智算提供指数级扩展存储能力。
为AI设计的高性能网络架构HPN7.0,性能和稳定性也再次提升,其中,集合通信性能提升1倍以上,模型端到端训练性能提升10%以上。
通过底层计算、存储、网络等基础设施的升级,阿里云灵骏集群可提供超大规模、超强性能的智能算力,万卡规模性能线性度超过96%,并行存储吞吐20TB/s,万卡规模下网络带宽利用率超过99%,可支持单集群十万卡级别AI算力规模。
面向AI业务,阿里云计算产品也大幅演进更新。本次云栖大会上,容器服务ACK面向AI实现重磅升级,大模型应用冷启动延迟降低85%,并可提供15000个超大规模节点支持。同时,容器计算服务ACS 即将推出 GPU容器算力。
扬子晚报/紫牛新闻记者 徐晓风