国家标准项目《智能技术政务应用 政务大模型应用效果评估规范》由 SWG35(全国智能技术社会应用与评估基础标准化工作组)归口 ,主管部门为国家标准委。
主要起草单位 中国移动通信有限公司研究院 、清华大学 、大汉软件股份有限公司 、北京华宇信息技术有限公司 、中国标准化研究院等 。
| 35 信息技术、办公机械 |
| 35.240 信息技术应用 |
| 35.240.01 信息技术应用综合 |
1、范围 本文件提供了政务大模型应用效果评估的原则及评估框架,提出了政务大模型应用效果评估的主要维度,提出了评估实施的方式及基本流程。 本文件适用于大模型开发、提供或使用方(如开发企业、研究机构、评估机构)开展政务大模型应用效果评估活动,并适用于有关部门开展政务大模型应用的监管评估。 2、主要技术内容 本标准技术部分主要包括以下内容。 (1)评估原则 评估原则包括客观公正、科学实用、动态适应、保密合规四条原则。 (2)评估方式 评估宜从定量评估、定性评估两种方式进行综合评估。 (3)评估维度 评估维度从业务体验维度、评价分析维度、效率效益维度、安全合规维度四个一级维度、14个二级维度、N个三级维度展开。 (4)评估流程 评估的基本流程宜包括但不限于确定评估目的及评估方、委托与受理、评估准备、评估执行、评估分析、形成评估结论及评估报告编制等关键环节。