首页 / 知识百科列表 / 联影「元智」医疗多模态大模型落地赋能诊疗,释放智能价值
联影「元智」医疗多模态大模型落地赋能诊疗,释放智能价值
2025-10-11

 当前,医疗领域呈现出高度复杂化和专业化的特点,治疗手段丰富多样,同时医生与患者的需求呈现出高度细分且差异显著的态势。

 而通用大模型未经医疗垂域任务的训练,仅可用于解决医疗通识问题,在复杂疾病诊断、个性化治疗方案制定、疾病预后评估等医疗细分场景中,其性能与临床应用要求存在较大差距。因此医疗行业更需要医疗多模态大模型来应对复杂多样的医疗需求。

 联影「元智」医疗大模型率先突围,恰好精准回应了这一需求——其以影像大模型、文本大模型、视觉大模型、语音大模型、多模态大模型五大模型构建核心架构:针对“复杂疾病诊断”痛点,影像大模型依托数千万级医疗影像训练数据与数十万级精细标注,300余项影像分割任务准确率超95%;文本大模型将医学专业知识注入所接入的DeepSeek等通用大模型,实现仅需70B便可轻量化部署;视觉大模型全能覆盖4D建模、4D高速电影级渲染、医疗视频生成、人体重建等全部视觉能力场景;语音大模型在嘈杂环境中精准识别医疗术语,还支持多人对话时的智能声纹分析、身份识别。

 其中「元智」医疗多模态大模型通过融合视觉、语音、影像、文本,具备了「看」「听」「想」「读」的能力。

 值得一提的是,该模型已率先实现复杂场景的应用落地。例如,基于该「元智」医疗多模态大模型,uAI MERITS多元手术治疗平台实现了全球首创AI+AR引导的皮瓣移植手术。该方案通过在手术前使用基于各种医疗图像上训练的Transformer模型,实现精准分割。在术中,通过1个多模态大模型来实现术中3D图像和视频配准、透视投影和动态视觉跟踪,实时提供术中的指引,大大提升手术效率和精准度,目前已在香港、上海落地数十例。

 香港大学牙医学院口腔颌面外科的苏宇雄团队正在手术

 此外,「元智」医疗多模态大模型也是多款医疗智能体的技术基座,已实现多款智能体多模态能力的场景化落地。在这样的由医疗多模态大模型及智能体构成的未来生态中,医疗场景将迎来更多突破和落地可能。

阅读 0
Copyright@2023 United Imaging Intelligence.ALL Rights Reserved.
沪ICP备2021013738号