注册

国家标准计划《人工智能 服务器系统性能测试规范》由 TC28(全国信息技术标准化技术委员会)归口,TC28SC42(全国信息技术标准化技术委员会人工智能分会)执行 ,主管部门为国家标准委

主要起草单位 中国电子技术标准化研究院华为技术有限公司中国科学院软件研究所北京航空航天大学浪潮电子信息产业股份有限公司

目录

基础信息

计划号
20221794-T-469
制修订
制定
项目周期
22个月
下达日期
2022-12-30
公示开始日期
2022-10-21
公示截止日期
2022-11-04
标准类别
方法
国际标准分类号
35.020
35 信息技术、办公机械
35.020 信息技术(IT)综合
归口单位
全国信息技术标准化技术委员会
执行单位
全国信息技术标准化技术委员会人工智能分会
主管部门
国家标准委

起草单位

范围和主要技术内容

范围:规定了人工智能服务器系统(含AI服务器、AI服务器集群、AI HPC计算设施等)的性能测试方法。 适用:适用于AI服务器系统(含AI服务器、AI服务器集群、AI HPC计算设施等)的性能评估。 内容框架如下: 1.测试类型 a)开放测试 b)封闭测试 2.训练 a)训练过程; b)测试控制要素(含准确率门限、机器学习框架、混合精度训练、训练结果精度要求、数据读入要求、数据预处理过程、数据遍历要求、目标模型要求、超参选取规则、优化算法技术要求、损失函数技术要求、操作系统及环境要求等); c)结果符合性(含元数据、结果模型一致性、训练代码要求、日志要求等) d)场景(含通用及行业专用场景); e)指标及获取方法(含通用指标、测试学相关指标、行业专用指标等); f)测试工具要求(构架、功能要求、公平性保障要求); 3.推理 a)推理过程; b)测试控制要素(含作业到达控制、准确率、机器学习框架、量化、重训练、数据预处理、数据后处理、数据遍历、数据缓存、作业延误及丢失控制、操作系统及环境要求等); c)结果(含元数据、模型一致性要求、代码技术要求、日志要求等); d)场景(含通用及行业专用场景); e)指标及获取方法(含通用指标、测试学相关指标、行业专用指标); 测试工具要求(构架、功能要求、公平性保障要求等)。