Trick-or-Treat:合成图像对抗评测多模态医学模型
热点事件持续更新
Trick-or-Treat:合成图像对抗评测多模态医学模型
1 篇报道1 个报道来源18 小时前更新
先了解这件事
AI 综述
研究者推出 Trick-or-Treat,一个将真实胸片与合成临床照片配对的对抗性多模态医学基准,用于检验模型跨模态推理。测试发现,三个前沿模型在面对不匹配图像对时,在 45-57.5% 的案例中幻觉出有临床意义的照片发现,高于单独展示照片时的 25-37.5%。
AI 根据报道生成 · 8 分钟前更新
最新进展11月4日 23:13
Trick-or-Treat:用合成图像对多模态医学推理进行对抗性评测报道时间线
沿着报道,了解事件的不同侧面。
11月4日
- arXiv · cs.AITrick-or-Treat:用合成图像对多模态医学推理进行对抗性评测
研究者推出 Trick-or-Treat,一个将真实胸片与合成临床照片配对的对抗性多模态医学 benchmark,用于检验模型跨模态推理。在三个前沿模型的测试中,面对不匹配图像对时模型在 45-57.5% 的案例中幻觉出有临床意义的照片发现,高于单独展示照片时的 25-37.5%。模型倾向于忽略不一致、幻觉出与胸片相符的发现,该框架同时展示了合成图像在对抗性多模态评测中的应用潜力。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。