多模态医疗大模型CARES Copilot 1.0发布

科技日报记者 陆成宽

记者21日获悉，由中国科学院自动化研究所和中国科学院香港创新研究院联合研发的医疗领域AI多模态大模型——CARES Copilot 1.0日前在香港正式发布，现已面向香港神经外科医生开放使用。

据悉，CARES Copilot 1.0是一款专为医疗领域设计的大型模型系统，实现了图像、文本、语音、视频等多模态手术数据的深入理解，能够准确识别和解析动作、影像和生命体征等多种医疗信息。在实际应用中，CARES Copilot 1.0不仅可为临床医生提供手术阶段的详细分析报告，还能进行手术风险与质量评估，从而提高医疗服务水平。

“CARES Copilot 1.0结合了大模型的广泛知识和小模型的专业精准，可以进行高级的图像和视频语义提取，同时利用语言模型进行深层次理解，在医学多场景多任务的理解与处理方面取得了显著进展，可有效支撑手术阶段识别、器械与解剖结构分割、器械检测与计数、MRI（磁共振成像）高分辨率图像生成等功能。”中国科学院香港创新研究院人工智能与机器人创新中心执行主任、中国科学院自动化研究所研究员刘宏斌介绍。

值得一提的是，CARES Copilot 1.0还能够处理超过3000页的复杂手术教材，对于年轻医生的培训和教学具有极高的实用性。同时，通过深度检索功能，CARES Copilot 1.0能够快速精确地提取手术教材、专家指南、医学论文等专业文档信息，并确保所提供答案的高度可信度和可追溯。经过测试，该大模型能在一两秒内快速检索百万级数据，准确率高达95%。

刘宏斌表示，CARES Copilot 1.0目前已在香港多家医院的不同科室进行了实地测试和优化，验证了其作为手术智能辅助工具的基础功能和关键技术，下一步研究团队将持续推动医疗智能化的实现，从而为智能健康产业的进步提供强有力的技术支持。

（中国科学院自动化研究所供图）