arXiv · cs.AI· Zheng Zhang·· 21 小时前AI 评分23
超越单一属性审计:ComFair 可配置多属性基准评测 LLM 交叉性公平性
Beyond Single-Attribute Auditing: A Configurable Multi-Attribute Benchmark for Intersectional Fairness in LLMs
来源与原文
arXiv · cs.AI
作者:Zheng Zhang
发布时间:(北京时间)
阅读原始来源 · arxiv.org ↗完整链接与内容说明
https://arxiv.org/abs/2610.35069v1
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
研究者推出可配置公平性基准 ComFair,将现有公平性数据转换为 479,066 个受控的双属性与多属性实例,并为每个实例配对任务等价的源数据。对十款 LLM 在 Recognition、Selection、Continuation、Conversation 四类任务上的实验显示,敏感度依任务和子群组而异:判别式任务能暴露聚合指标下不可见的双向变化,生成式任务偏移更大且方向不对称,模型排名随属性组合而波动。ComFair 提供可扩展的受控敏感度审计,用于检验公平性评测结论在多属性交叉场景下的稳健性。
来源:arXiv · cs.AI · arxiv.org