国家标准项目《智能计算集群 存储系统总体要求》由 SWG32(全国智能计算标准化工作组)归口 ,主管部门为国家标准委。
主要起草单位 之江实验室 、华为技术有限公司 、浪潮电子信息产业股份有限公司 、济南浪潮数据技术有限公司 、曙光信息产业股份有限公司 、新华三技术有限公司 、云尖信息技术股份有限公司 。
| 31 电子学 |
| 31.080 半导体分立器件 |
| 31.080.99 其他半导体分立器件 |
一、范围 本文件规定了智能计算集群存储系统的总体架构,以及存算解耦协同、超节点存储协同、异构内存与内存池化、数据处理与卸载、大模型训练与推理负载支撑、数据供给与数据管理、性能与扩展性、可靠性与数据保护、运维管理、绿色节能与安全管控等方面的总体要求。 本文件适用于万卡及以上规模智能计算集群存储系统的规划、设计、建设、部署与运维管理,供存储系统提供方以及智能计算集群的建设与运营管理方使用。 二、主要技术内容 智能计算集群存储系统面向万卡及以上规模大模型训练与推理场景,采用计算与存储解耦协同的总体架构。计算侧以超节点为基本算力形态,存储侧构建分层分域的存储资源池,二者通过高速数据通道实现数据的按需供给与协同调度,并由统一的运维管理平面提供全生命周期管理。包含以下部分: 1.计算侧:由一个或多个超节点构成。超节点内部通过高速互联将CPU、GPU/NPU及异构内存紧耦合为统一的scale-up计算域,是训练与推理作业的基本算力载体。 2.协同数据通道层:由DPU、高速网络及存储互联协议构成,提供超节点域内内存语义互联与域间RDMA高速网络两类数据通路,承担数据传输、协议处理与基础设施任务卸载。 3.存储侧:按性能与成本分层构建,包括异构内存与内存池层(显存池化、CXL内存池)、高性能数据层(并行文件存储、全闪缓存池)及大容量数据层(对象存储、数据湖与归档存储),提供容量、性能与成本的分级供给。 运维管理层:贯穿计算侧与存储侧,提供统一监控告警、资源调度、数据保护、安全管控与能效管理能力,支撑超大规模集群的稳定运行。