多模态医学理解
融合医学影像、病理信息与临床文本,研究视觉与语言的联合表征,建立跨模态医学信息的理解与关联能力。
多模态医学信息
医学影像 器官 · 病灶 · 空间结构 病理图像 组织形态 · 细胞特征 临床文本 病史 · 检验 · 随访面向任务的输出
任务相关特征 证据与来源 任务评测结果研发架构示意
融合医学影像、病理信息与临床文本,研究视觉与语言的联合表征,建立跨模态医学信息的理解与关联能力。
围绕具体疾病和明确医学任务,开展数据建模、模型研发与性能评估,探索面向专病研究的人工智能方法。
将模型结果与原始数据、医学知识和临床信息关联,呈现信息来源与关键依据,为结果审阅和研究分析提供支持。
关注设备、数据、人群与场景差异,探索模型评测、适配和应用验证方法,研究与医院科研需求相匹配的技术路径。
从明确的医学任务与评测方案出发,探索可复用的医疗人工智能能力。
数据建设 → 模型研发 → 效果评测 → 场景验证