《医疗大模型应用测评指南编制说明》.doc

上海人工智能行业协会

团体标准《医疗大模型应用测评指南》（征求意见稿）

编制说明

工作简况

任务来源

为积极响应国家对医疗领域技术创新和标准化建设的号召，推动医疗大模型技术的健康发展，促进其在医疗行业的广泛应用，本团体标准旨在规范和指导医疗大模型应用测评的框架体系。本项目由上海库帕思科技有限公司提出，上海人工智能协会批准立项。《医疗大模型应用测评指南》主要起草单位：上海库帕思科技有限公司，计划应完成时间为2025年1月。

主要参与起草单位

本标准由上海库帕思科技有限公司、工业互联网创新中心(上海)有限公司、上海人工智能协会、上海人工智能实验室、上海交通大学医学院附属瑞金医院、复旦大学附属中山医院、上海长海医院等10余家单位共同负责起草。

主要工作过程与主要起草人所做工作

本标准编制过程到目前主要经历了标准工作组成立、标准调研、立项阶段和标准研制四个阶段。各阶段主要工作总结如下：

标准工作组成立：2024年8月，面向社会征集标准编写参与单位，组成标准工作组。

标准调研：2024年9月-2024年12月，标准工作组对医疗大模型应用测评的标准化需求进行资料收集、查阅、分析和整理，对团体标准政策制度进行梳理，确定标准主要内容和标准框架结构。对照《标准化法》、《团体标准管理规定》和GB/T1.1-2020等标准，编写标准草案。期间为提高标准的普适性和可操作性，标准工作组通过召开研讨会以及书面反馈意见等多种形式，对标准文本进行修改完善。

立项阶段：2025年1月，标准工作组组织各参编单位代表开展了《医疗大模型应用测评指南》团体标准的立项会，与会专家一致同意标准立项。

标准研制：2025年1月，标准工作组组织上海库帕思科技有限公司及各参编单位代表开展了共两轮《医疗大模型应用测评指南》团体标准的标准研制会，期间标准工作组共处理内部意见10余条，形成标准征求意见稿。

标准工作组主要成员：山栋明、黄海清、施家樑、郑忠斌、方金武、张宏亮、蒋龙泉、汪智、王哲文等30余人。

主要分工：山栋明为工作组组长，主持全面协调工作。张宏亮为本标准主要持笔人，负责本标准的起草、编写。蒋龙泉、汪智、王哲文等为组员负责对医疗大模型应用测评框架及测评方法进行全面调研、研究分析和资料汇总整理等工作，提炼总结医疗大模型应用测评指南，并进行了反复验证、修改完善。

二、标准编制原则和确定主要内容的论据及解决的主要问题

（一）原则

（1）符合性原则，团体标准制修订应符合国家有关团体标准的法律法规、行政规章的要求；

（2）先进性原则，团体标准的主要技术指标不得低于强制性标准的技术要求，并应优于国家标准、行业标准；

（3）协调性原则，团标标准文本应与现行标准协调一致；

（4）规范性原则，团体标准编写应规范，符合GB/T1.1的要求。

（二）确定主要内容的论据

（1）《团体标准管理规定》第十一条明确提出“团体标准应当符合相关法律法规的要求，不得与国家有关产业政策相抵触。”《中国标准化协会标准管理办法》中第三条明确提出“标协标准制修订工作应当遵循以下原则：（一）遵守国家有关的法律、法规；（二）符合强制性标准的要求。”

（2）《标准化法》第二十一条明确提出“推荐性国家标准、行业标准、地方标准、团体标准、企业标准的技术要求不得低于强制性国家标准的相关技术要求。国家鼓励社会团体、企业制定高于推荐性标准相关技术要求的团体标准、企业标准。”《团体标准管理规定》第十三条明确提出：“制定团体标准应当以满足市场和创新需要为目标,聚焦新技术,新产业,新业态和新模式,填补标准空白。”《中国标准化协会标准管理办法》中第三条明确提出“标协标准制修订工作应当遵循以下原则：（三）优先支持符合经济发展方向，促进科学技术进步，提高产品质量和满足市场需求的项目；（四）积极采用国际标准；（五）协调融合、有序优化、技术先进、经济合理。”

（3）《团体标准管理规定》第十一条明确提出:“对于术语、分类、量值、符号等基础通用方面的内容应当遵守国家标准,行业标准,地方标准,团体标准一般不予另行规定。”第十五条明确规定：“技术审查原则上应当协商一致。如需表决,不少于出席会议代表人数的3/4同意方为通过。”

（4）《团体标管理规定》第十五条团体标准的编写参照GB/T1.1《标准化工作导则第1部分:标准化文件的结构和起草规则》的规定执行。GB/T20004.1-2016《团体标准化第1部分：良好行为指南》第7章7.2条编写原则提出：“团体宜按照GB/T1.1制定统一的标准编写规则，包括团体标准的结构、起草表述方法、格式等内容，以提高团体标准的适用性。”

（三）解决的主要问题

首先，该标准能够为医疗大模型的数据集应用提供标准化的评估框架，保障大模型安全、合规和高效运行，确保其