登录
注册
首页
政策文件
标准化活动
社会团体
团体标准
抽查公示
常见问题
联系我们
首页
>
团体标准
>
团体标准详情
ICS
35
团体标准
T/SAIAS 060—2026
医疗大模型应用测试方法
2026-05-14发布
2026-05-12实施
上海市人工智能行业协会 发布
现行
T/SAIAS 060—2026
医疗大模型应用测试方法
Test methods for medical large-scale model application
公布日期:2026-05-14
发布日期:2026-05-11
实施日期:2026-05-12
所属团体:上海市人工智能行业协会
标准发布公告
分类信息
国际标准分类
35 信息技术、办公机械 -> 35.240 信息技术应用
中国标准分类
-
国民经济分类
I 信息传输、软件和信息技术服务业
研制信息
起草单位
浦江
***
验室
该起草单位未通过
全国组织机构统一社会信用代码查询平台
校验。根据团体填报信息,该单位为“其他”
上海市人工智能行业协会
复旦大学附属中山医院
讯飞医疗科技股份有限公司
广东省医学科学院
哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院)
上海库帕思科技有限公司
上海交通大学医学院附属瑞金医院
上海交通大学医学院附属第九人民医院
上海市质子重离子医院有限公司
四川大学华西医院(四川省国际医院)
上海市第一人民医院
复旦大学附属肿瘤医院
中南大学湘雅医院
广州医科大学附属第一医院(广州呼吸中心)
蚂蚁科技集团股份有限公司
起草人
徐 捷
傅徐军
丁金如
卞谋啸
钟俊浩
张纪阳
陈志炜
贺志阳
梅林盛
梁会营
汤步洲
山栋明
施佳樑
朱立峰
柏志安
谢姗姗
程 美
尤梦祥
金文忠
谢晶晶
刘银芝
杨轶娇
王 增
范骏翔
王 奕
胡佳迎
陈廷寅
苏越明
陈 智
黄超仪
王文熙
杨明晖
毕东生
崔 潇
邓思文
缪品磊
任秋月
杨闻博
范围
主要技术内容
该标准规定了医疗大模型应用的测试方法,适用于医院侧与患者侧两大场景。测试体系涵盖五类内容:**场景应用能力测试**(包括诊断辅助、病历生成、导诊、健康问答等具体任务,采用准确率、F1-score、BLEU、ROUGE、Elo等客观指标及人类专家主观评分);**性能测试**(性能提升度、业务优化度、资源利用率、响应实时性及平均无故障时间);**安全性测试**(基础设施、数据安全、算法模型安全、内容安全,含危险问题识别与危险回答避免);**模型基础能力测试**(多模态支持度、语言/语音/视觉/跨模态任务支持度,以及语言理解与生成、图像分析等能力);**模型服务能力测试**(个性化服务、可靠性、鲁棒性、公平性、可解释性、可审查性、可维护性及服务配套)。测试方法上,综合采用自动化基准测试、人类专家评估(需计算Kappa或ICC一致性)及大模型作为裁判(Elo排位分)三种方式,并要求测试数据集不少于200条样本、主观测试执行3次。该标准为医疗大模型在专业诊断与公众健康服务中的质量评估提供了系统化依据。
适用范围
-
是否包含专利
否
{{$t('common.home')}}
>
团体标准
>
团体标准详情
预览模式,未正式公布,仅供预览使用!
预览模式,未正式公布,仅供预览使用!
预览模式,未正式公布,仅供预览使用!
预览模式,未正式公布,仅供预览使用!
预览模式,未正式公布,仅供预览使用!
预览模式,未正式公布,仅供预览使用!
预览模式,未正式公布,仅供预览使用!
预览模式,未正式公布,仅供预览使用!
预览模式,未正式公布,仅供预览使用!
{{ detail.standardStatusName }}
{{ $t('standardDetail.aboutToAbolish') }}
{{ detail.standardNo }}
{{ detail.standardTitleCn }}
{{ detail.standardTitleEn }}
{{$t('standardDetail.filePublishDate')}}:{{ detail.filePublishDate || '-' }}
{{$t('standardDetail.publishDate')}}:{{ detail.publishDate || '-' }}
{{$t('standardDetail.implementDate')}}:{{ detail.implementDate || '-' }}
{{$t('standardDetail.abolishTime')}}:{{ detail.disabledDate || '-' }}
{{$t('standardDetail.upcomingAbolishDate')}}:{{ detail.disabledDate }}
{{$t('standardDetail.belongOrg')}}:{{ detail.organName }}
{{ file.tagName }}
{{ (detail.isOpen == 1 && detail.hasCnPdf == true) ? $t('standardDetail.previewCn') : '不公开' }}
{{$t('standardDetail.previewEn')}}
{{ detail.isSale == 1 ? $t('organization.purchase') : $t('organization.notPurchasable') }}
{{$t('organization.complaint')}}
{{ $t('standardDetail.adminPreviewCn') }}
{{ $t('standardDetail.adminPreviewEn') }}
{{ timelineRecordSep }}
{{ date }}
{{ getTimelineDisplayTitle(cell.item) }}
当前
{{ meta.label }}:
{{ meta.value }}
{{$t('standardDetail.categoryInfo')}}
{{$t('standardDetail.icsNo')}}
{{ detail.icsl1Name || '-' }}
{{$t('standardDetail.ccsNo')}}
{{ detail.ccss1Name || '-' }}
{{$t('standardDetail.nationalEconomy')}}
{{ detail.ccsl1Name || '-' }}
{{$t('standardDetail.developInfo')}}
{{$t('standardDetail.draftingUnit')}}
{{ part.text }}
{{ part.text }}
{{ part.text }}
-
{{$t('standardDetail.drafter')}}
{{ name }}
{{ drafterText }}
-
{{$t('standardDetail.applicableScope')}}
{{$t('standardDetail.mainContent')}}
{{ detail.mainContent || '-' }}
{{$t('standardDetail.scope')}}
{{ detail.scope || '-' }}
{{$t('standardDetail.hasPatent')}}
{{ detail.isPatentName || '-' }}