为落实《生成式人工智能服务管理办法》(国家互联网信息办公室等令 第15号)、《互联网信息服务深度合成管理规定》(国家互联网信息办公等令 第12号)等文件要求,加快推进大模型与医疗健康行业深度、规范融合。中国信息通信研究院(以下简称“中国信通院”)基于通用大模型评价重点,结合医疗健康行业属性,搭建医疗健康行业大模型标准与评测体系,联合国家卫生健康委医疗服务指导管理中心、北京协和医院、中国科学技术大学附属第一医院、华中科技大学同济医学院、讯飞医疗等20余家单位,共同推进标准制定、评估测试及生态建设工作,促进医疗健康行业大模型有序、健康发展。
2023年10月24日,中国信通院云大所副所长闵栋在第六届世界声博会智慧医疗论坛进行《医疗健康行业大模型应用服务能力评价实践》主题演讲,对已研制形成的《医疗健康行业大模型应用技术要求 第1部分:医院侧医疗服务》等四项标准内容做了详细介绍,同时首次提出全面多维的医疗健康行业大模型应用服务能力评价方法(以下简称评价方法)。
评价方法旨在对医疗健康行业大模型应用服务能力进行全方位、多角度的综合评定。重点关注大模型的场景应用能力、基础模型能力、模型服务能力、性能要求、安全性要求等方面,通过构建全面多层的测试问题集,探查医疗健康行业大模型的知识丰富度和临床沟通能力;构建具备综合评测能力的数据集,评价基础模型能力;设计符合性清单,评定性能、安全性及模型服务能力。
更多精彩,敬请阅读现场发布PPT