跳到正文
GitHub · 去对齐工具与仓库·· 17 天前精选AI 评分71

DuplexJev 开源 speech-to-decision 模型:一次前向 92 ms 输出 10 项语音决策

adventists-ai/duplexjev

来源与原文

GitHub · 去对齐工具与仓库

发布时间:(北京时间)

阅读原始来源 · github.com ↗
完整链接与内容说明

https://github.com/adventists-ai/duplexjev

本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。

AI 导读

adventists-ai 开源了 DuplexJev 系列语音决策模型(含 32B-Para、4B-Para、32B-Turn、32B-Stress 等),将 Qwen3-ASR-0.6B 编码器接入冻结 LLM,单次前向直接输出带概率的封闭选项判断,无需 ASR 转写与文本解码,10 项决策在单张 H200 上约 92 ms,比 ASR 加 LLM 级联快 21×。模型可识别转向状态、打断、情绪、性别、重音、停顿、笑声等非语言声音与说话风格,情绪与性别约 91%,turn-taking 在 CoDeTT 零样本达 70.0,全部支持 vLLM 部署,代码 Apache-2.0、完整模型 CC BY-NC 4.0,论文见 arXiv:2610.02638。

推荐理由

把冻结 LLM 变成免解码的语音决策引擎,一次前向同时输出转向、情绪、性别等带概率的多项判断,延迟与基准数据都给得完整。

来源:GitHub · 去对齐工具与仓库 · github.com