国家标准项目《人工智能 预训练模型 第2部分:评测指标与方法》由 TC28(全国信息技术标准化技术委员会)归口,TC28SC42(全国信息技术标准化技术委员会人工智能分会)执行 ,主管部门为国家标准委。
主要起草单位 中国电子技术标准化研究院 、上海人工智能创新中心 、科大讯飞股份有限公司 、北京百度网讯科技有限公司 、阿里云计算有限公司 、华为云计算技术有限公司 、北京奇虎科技有限公司 、中国移动通信有限公司研究院 、北京航空航天大学 、北京智源人工智能研究院 、深圳市腾讯计算机系统有限公司 、清华大学 、华为技术有限公司 、海信集团有限公司 、鹏城实验室 、北京大学 、北京市商汤科技开发有限公司 、美的集团(上海)有限公司 。
| 35 信息技术、办公机械 |
| 35.240 信息技术应用 |
本文件提出了预训练模型评价指标和评测方法,规定了预训练模型的任务、评测指标以及评测方法。 本文件适用于预训练模型的评估与测试,也可以为预训练模型的设计、开发、应用提供指导。 本文件主要规定了预训练模型通用能力评测维度和评测方法。