0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

浪潮信息AS13000G7荣获MLPerf™ AI存储基准测试五项性能全球第一

全球TMT 来源:全球TMT 作者:全球TMT 2024-09-28 16:46 次阅读

北京2024年9月27日/美通社/ -- 9月25日,MLCommons协会发布最新MLPerf™ Storage v1.0 AI存储基准测试成绩。浪潮信息分布式存储平台AS13000G7表现出众,在3D-UNet和CosmoFlow两个模型共计八项测试中,斩获五项冠军。

wKgaomb3wmGAImpdAACRqto4p7Q087.jpg


MLPerf™ Storage v1.0 AI存储基准测试成绩

MLPerf™是影响力最广的国际AI性能基准评测,由图灵奖得主大卫•帕特森(David Patterson)联合顶尖学术机构发起成立。2023年推出MLPerf™ 存储基准性能测试,旨在以架构中立、具有代表性和可重复的方式衡量机器学习(ML)工作负载的存储系统性能。该测试通过准确建模ML工作负载所产生的I/O模式来帮助解决存算平衡问题,为不同存储系统和不同加速器类型的混合和匹配提供了灵活性,为ML/AI模型开发者选择存储解决方案提供权威的参考依据。

本次MLPerf™ 存储基准评测(v1.0)吸引了全球13家领先存储厂商和研究机构参与。该评测围绕医学影像分割、图像分类、宇宙学参数预测三大AI存储应用场景,采用主流的3D-Unet、ResNet50、CosmoFlow三类模型,在GPU利用率高达90%或70%的条件下,以带宽和支持的模拟 GPU (模拟加速器)数量为关键性能指标,评估单客户端或集群模式下存储系统的性能表现。

本次测试,浪潮信息采用3台AS13000G7搭建分布式存储集群,搭载ICFS自研分布式文件系统,在3D-UNet和CosmoFlow两大评测任务中共获得五项最佳成绩。其中,在图像分割3D-UNet多客户端2评测任务中,服务于10个客户端264个加速器,集群聚合带宽达到360GB/s,单个存储节点的带宽高达120GB/s;在宇宙学分析CosmoFlow单客户端2和多客户端2评测任务中,分别提供了18 GB/s和52 GB/s的带宽最佳成绩。

近年来,浪潮信息基于存算协同的理念,持续加大存储研发投入,从整体架构到各技术栈持续创新,优化升级存力,提升了GPU算力整体性能表现,实现了模型训练数据处理的即时性,消除了GPU资源闲置(即"饥饿GPU"现象),全面提升大模型训练效率。

架构层面,采用全新数控分离架构。数据面和控制面完全解耦,控制面实现数据管理和访问,数据面读写操作直通到盘,达到120 GB/s的单存储节点的超高性能,单存储节点支撑5台8卡计算节点规模,同时计算集群GPU利用率90%以上;

软件层面,通过多路并发透传技术,有效减少I/O操作中频繁的上下文切换,降低单次I/O时延50%,同时达到高并发下时延稳定性。本次测试中1430个高并发读线程支撑下,保证每个线程单次I/O的时延均在0.005秒,AI端到端训练中I/O占比低于10%。此外,通过元数据VRANK技术,达到单个元数据进程多单元并发处理,提供高性能元数据服务;

软硬协同层面,通过内核亲和力调度,I/O请求动态调整,增强文件系统与计算节点亲和性,确保负载均衡,将数据移动与多核CPU之间的访问效率提升400%。

浪潮信息是全球领先的存储供应商,存储装机容量连续3年稳居全球前三、中国第一,是承载中国用户数据最多、数据存力贡献最大的存储厂商。近年来,浪潮信息积极拥抱AI生态,专注于构建面向人工智能的存储平台,通过精准优化存算资源配置与持续强化技术创新,全面推进AI产业化和产业AI化进程,力争打造AI存储的理想之选。

审核编辑 黄宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 存储
    +关注

    关注

    13

    文章

    4308

    浏览量

    85821
  • 浪潮
    +关注

    关注

    1

    文章

    459

    浏览量

    23857
  • AI
    AI
    +关注

    关注

    87

    文章

    30824

    浏览量

    268977
收藏 人收藏

    评论

    相关推荐

    MLCommons推出AI基准测试0.5版

    开放式机器学习工程联盟 MLCommons 在美国加州当地时间公布推出适用于消费类 PC 的 AI 性能MLPerf Client 基准测试
    的头像 发表于 12-12 16:47 301次阅读

    浪潮信息分布式存储平台AS13000G7的优越性能

    近年来,人工智能相关技术在社会发展中扮演着日渐重要的角色。特别是在广告、影视等多个行业,AIGC将内容生产效率提升数倍甚至数十倍,降低人力成本50%以上,是推动企业数字化转型的关键动力。然而,在AI技术快速发展和相关应用迅速增长的同时,其背后的数据基础设施也面临严峻的考验。
    的头像 发表于 11-12 11:42 342次阅读
    <b class='flag-5'>浪潮信息</b>分布式<b class='flag-5'>存储</b>平台<b class='flag-5'>AS13000G7</b>的优越<b class='flag-5'>性能</b>

    浪潮信息AI存储性能测试的领先之道

    AI技术的无限可能。近日,在MLCommons的子项目MLPerf Storage v1.0性能基准评测中,浪潮信息再度展现了在
    的头像 发表于 10-29 16:30 244次阅读
    <b class='flag-5'>浪潮信息</b><b class='flag-5'>AI</b><b class='flag-5'>存储</b><b class='flag-5'>性能</b><b class='flag-5'>测试</b>的领先之道

    长擎安全操作系统24与浪潮信息HF/AS存储系列成功兼容

    在数字化转型浪潮席卷全球的今天,信息安全与数据存储的稳定高效成为企业不可忽视的两大核心要素。近日,一项重要的技术兼容性
    的头像 发表于 07-22 16:20 691次阅读

    浪潮信息推出AIGC存储解决方案

    隆重推出了基于其新代分布式存储平台AS13000G7的AIGC存储解决方案,这创新成果无疑为当前大模型应用面临的
    的头像 发表于 07-03 11:16 716次阅读

    浪潮信息推出基于新代分布式存储平台AS13000G7的AIGC存储解决方案

    、新代分布式存储AS13000G7自身产品优势,新方案从容应对大模型应用对存储性能、容量以及数据管理等方面的苛刻要求。同时,
    的头像 发表于 07-01 19:00 1427次阅读
    <b class='flag-5'>浪潮信息</b>推出基于新<b class='flag-5'>一</b>代分布式<b class='flag-5'>存储</b>平台<b class='flag-5'>AS13000G7</b>的AIGC<b class='flag-5'>存储</b>解决方案

    浪潮信息分布式存储AS13000完成英特尔至强6能效核处理器适配

    近日,浪潮信息分布式存储AS13000完成英特尔至强6能效核处理器适配,实现每瓦性能提升2.3倍,以更高的效率、更优的成本满足海量多态数据的存储
    的头像 发表于 06-19 10:05 853次阅读
    <b class='flag-5'>浪潮信息</b>分布式<b class='flag-5'>存储</b>AS<b class='flag-5'>13000</b>完成英特尔至强6能效核处理器适配

    CCF-TCIST走进浪潮信息 共话AI时代存储创新

    CCF信息存储技术专委会走进浪潮信息 共话大模型时代的存储创新之道 北京2024年6月7日 /美通社/ -- 近日,中国计算机学会
    的头像 发表于 06-07 14:27 283次阅读
    CCF-TCIST走进<b class='flag-5'>浪潮信息</b> 共话<b class='flag-5'>AI</b>时代<b class='flag-5'>存储</b>创新

    浪潮信息发布AS13000G7-N系列分布式全闪存储

    浪潮信息近日推出了专为大型AI模型优化的AS13000G7-N系列分布式全闪存储。该系列基于浪潮信息自研的分布式文件系统,结合新
    的头像 发表于 05-14 10:03 563次阅读

    为大模型专门优化 浪潮信息发布分布式全闪存储AS13000G7-N系列

    北京2024年5月10日 /美通社/ -- 近日,浪潮信息发布为大模型专门优化的分布式全闪存储AS13000G7-N系列。该系列依托浪潮信息自研分布式文件系统,搭载新
    的头像 发表于 05-10 16:37 428次阅读
    为大模型专门优化 <b class='flag-5'>浪潮信息</b>发布分布式全闪<b class='flag-5'>存储</b>AS<b class='flag-5'>13000G7</b>-N系列

    浪潮信息发布为大模型专门优化的分布式全闪存储AS13000G7-N系列

    近日,浪潮信息发布为大模型专门优化的分布式全闪存储AS13000G7-N系列。该系列依托浪潮信息自研分布式文件系统,搭载新代数据加速引擎D
    的头像 发表于 05-08 09:38 560次阅读
    <b class='flag-5'>浪潮信息</b>发布为大模型专门优化的分布式全闪<b class='flag-5'>存储</b>AS<b class='flag-5'>13000G7</b>-N系列

    图读懂浪潮信息代分布式全闪存储AS13000G7-N系列

    图读懂浪潮信息代分布式全闪存储AS13000G7-N系列
    的头像 发表于 05-08 09:35 1271次阅读
    <b class='flag-5'>一</b>图读懂<b class='flag-5'>浪潮信息</b>新<b class='flag-5'>一</b>代分布式全闪<b class='flag-5'>存储</b>AS<b class='flag-5'>13000G7</b>-N系列

    浪潮信息NE5260G7服务器适配第代英特尔至强处理器

    浪潮信息近日宣布,其边缘服务器NE5260G7已成功适配第代英特尔至强处理器,实现了平均性能21%的提升。这创新产品不仅针对边缘
    的头像 发表于 03-06 09:29 897次阅读

    浪潮信息服务器NF5180G7荣获SPECjbb2015性能冠军

    近日,国际权威的标准性能评测机构(SPEC)公布了SPECjbb2015榜单,浪潮信息服务器NF5180G7凭借每秒558,626次企业应用业务处理的卓越成绩,蝉联性能冠军。这
    的头像 发表于 02-01 14:23 678次阅读

    浪潮信息八路服务器创SAP SD评测最高性能

    成绩,成为商业应用算力的全球新标杆。TS860G7浪潮信息最新代的企业级八路服务器,其取得的最新成绩也成功超越了16路小型机系统保持的性能
    的头像 发表于 01-17 20:49 632次阅读
    <b class='flag-5'>浪潮信息</b>八路服务器创SAP SD评测最高<b class='flag-5'>性能</b>