多模态心脏诊断智能体MULTI-AGENT · ISAIMS 2025 · ACM

ROLE CO-AUTHOR

2025.03–08

cardioagent 主视觉图

(Overview)

心血管疾病的精准诊疗太复杂,现有 AI 工具大多是个孤立的黑箱——能给预测,却说不清理由,更别提接进临床工作流。CardioAgent 换了个思路:多个智能体各管一摊,把 ECG、影像、临床指南这些多模态信号嚼碎了再拼起来。

这篇工作是我在上海理工大学HealtIT团队实习时的工作成果,被 ISAIMS 2025(ACM)录用,我是共同作者,负责Agent内一维时序增强、多模态融合和 FAISS 向量检索那块 RAG 闭环。

(Results)

  • ECG 分类99.82% / 95.51%Trans-Unet-ECG · 准确率 / F1
  • 指南检索R@5 = 0.89MedCPT + FAISS 向量检索
  • 知识库42,000+PubMed 心血管文献 + 药械手册
  • CardioAgent · ISAIMS 2025

(Unfold)

心血管疾病诊疗的痛点很明确:现有 AI 大多是孤立的黑箱模型——能吐一个预测分数,却说不出为什么。更麻烦的是,心电图、医学影像、临床指南这些多模态信号各说各话,没有一个框架把它们揉在一起。CardioAgent 想做的,就是搭一个多智能体协作框架——每个 Agent 管一摊,把多模态信号嚼碎了再拼起来,给出可解释、能落地的决策支持。

技术路线上,多智能体分工协作是骨架,一维时序数据增强让 ECG 信号更鲁棒,FAISS 向量索引搭起 RAG 闭环——让每条建议都挂得上指南证据。我的角色是共同作者,扛了一维时序增强策略、多模态融合机制和 FAISS 向量索引 RAG 闭环三块——把「黑箱预测」往「可解释决策」推了一把。

(NEXT PROJECT)

图像/视频分割