论文
EmoMed:结合实时检索的情绪感知多模态医疗支持Agent
EmoMed: An Emotionally-Aware Agent for Multimodal Medical Support with Real-Time Information Retrieval
摘要
我们推出了 EmoMed - 一种多模态医疗咨询智能体,可根据用户的情绪状态调整其响应,同时保持临床准确性。该系统处理文本和医学图像,检测用户输入的影响指标(焦虑、困惑、紧迫性),并相应地调整响应语气、结构和细节水平。为了确保事实可靠性,智能体通过双重检索机制来提供临床信息:基于网络的事实检查和与 API 连接、不断更新的医学知识库。我们使用包括 LLM 法官评估、MedQA 风格准确性测试、BERT 评分、安全性/有用性评级和多模态医疗基准在内的综合指标,在七种最先进的语言模型(GPT-4/5、Qwen3、Llama 4、Gemini 2.5、Grok4、Claude3)中评估我们的方法。结果表明,情绪适应性反应在各个评估维度上始终优于中性基线,且不影响临床准确性。一项受控用户研究验证了这些发现,参与者表示感知同理心和沟通清晰度有所提高,同时保持了对事实准确性的信任。源代码:这个https URL