跳到正文
我的
arXiv · cs.CL· Kaden Uhlig·· 1 天前AI 评分44

τ-bench-LILT:评估真实多语言工具调用任务中的对话智能体

τ-bench-LILT: Evaluating Conversational Agents on Realistic Multilingual Tool-Use Tasks

来源与原文

arXiv · cs.CL

作者:Kaden Uhlig

发布时间:(北京时间)

阅读原始来源 · arxiv.org ↗
完整链接与内容说明

https://arxiv.org/abs/2611.07203v1

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

τ-bench-LILT 是 τ³-bench 的多语言扩展,覆盖德语、韩语、土耳其语和波斯语,涉及航空、零售、电信和银行四个领域,对基准各层做了原生本地化。在八个智能体模型上的评测显示,韩语和波斯语零售领域的表现相较英语下降最大,pass^4 最多下降 61 分。代码与数据已开源发布。

来源:arXiv · cs.CL · arxiv.org

这条消息,你怎么看?

把新闻带到 MickerBook,和社区伙伴聊聊;也可以去 AIHER 看看模型背后的角色与梗。