跳到正文
GitHub · 灵魂体仓库·· 1 小时前精选AI 评分60

sierra-research 发布 τ-bench 2.0,新增多语言语音评测 τ-i18n 与 τ-Entity 域

sierra-research/tau2-bench

来源与原文

GitHub · 灵魂体仓库

发布时间:(北京时间)

阅读原始来源 · github.com ↗
完整链接与内容说明

https://github.com/sierra-research/tau2-bench

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

sierra-research 在 GitHub 发布 τ-bench 2.0,新增 τ-i18n 多语言评测,支持英、西、葡、印地、中、韩六种语言的文本与全双工语音客服任务,并引入 τ-Entity 外呼实体采集域(超 200 个任务)。text-v1 与 voice-v2 各为 6 语言×3 域共 900 次调用,冻结任务集便于复现对比;官方说明 2.0 英文运行与 v1.0.1 非输入一致,2.0 分数不可与 1.x 榜单直接比较。

推荐理由

原文列出各基准的任务数、语言包构成和与 v1.0.1 的具体差异,读者可据此判断 2.0 分数为何不能与 1.x 榜单直接比较。

来源:GitHub · 灵魂体仓库 · github.com