arXiv · cs.CL· Yibo Yang·· 1 天前AI 评分43
MedConstBench:基准测试宪法如何引导大语言模型的医学伦理行为
MedConstBench: Benchmarking How Constitutions Steer LLMs in Medical Ethics
来源与原文
arXiv · cs.CL
作者:Yibo Yang
发布时间:(北京时间)
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.36513v1
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
研究者推出 MedConstBench,一个将部署宪法作为控制变量的医学伦理 benchmark,围绕 Beauchamp 四原则组织,采用人工校准的多模型同行评审打分,并包含自建临床困境数据集 MedDilemma。对 10 个开源 LLM 在 4 种宪法下的评估显示,宪法效果具有维度选择性和模型依赖性,没有一种宪法普遍最优。作者据此提出 do-no-harm 自适应选择器,按模型选择宪法,在接近逐模型 oracle 的同时保证最坏情况底线,并可在低成本下泛化到未见模型。
来源:arXiv · cs.CL · arxiv.org