新闻、仓库与研究，按时间排列。
腾讯混元发布实时同传模型 Hy-SimulMT-30B-A3B，支持中英双向语音到语音翻译，在说话人讲话时持续接收音频并同步输出译文文本和语音，并通过实时声音克隆保留说话人音色。在 RealSI 长音频评测中其 StreamLAAL 约 3 秒，为对比系统中最低，GEMBA 分数超过所对比的开源模型和五个商业 API 中的四个。GitHub 提供 SimulInfer 推理服务与 SimulTrain 训练工具，Hugging Face 开放了 GGUF 权重，语音输出和声音克隆需配置 TTS 服务，也可在 Hy Translate App 中试用。
开发者 Recall T. Mabika 在 GitHub 开源 Ruzivo，一个专为绍纳语（ChiShona）打造的端到端多模态对话 AI 系统，采用 MIT 协议。系统在 4-bit 量化的 1.5B 基座模型上用 QLoRA（r=16, α=32）微调，下一 token 预测准确率从 32.1% 提升至 72.1%；RAG 子系统基于 14,201 句课程教材语料实现零幻觉检索。语音方面 WER 从 78.4% 降至 47.9%，并提供 Android App 与响应式 Web 客户端。
/u/smirkishere 基于 Qwen3-TTS 0.6B 微调出 Lure-TTS 和 Lure-Turbo 两个语音模型，支持内联标签、语音方向控制和音色克隆，训练成本不到 $200。Turbo 的 RTF 为 0.14，对比 5B Fish S2 Pro 的 0.195，同时保持相同说话人相似度（ECAPA 0.699）。作者还发布了 Lure-TTS 推理引擎，基于 faster-qwen3-tts（CUDA）、mlx-audio（Mac）和 audio.cpp（CPU），在 4090 上首音频输出 0.17s（参考代码为 10.6s），整体快约 5 倍（RTF 0.53 vs 2.54），支持流式 0.32s 分块、CUDA graphs 和最多 8 路并发。
推荐理由：作者公开了训练流程、RTF 与 ECAPA 对比数据和训练代码，可复现的低成本 TTS 微调路线有参考价值。
开发者基于 Qwen3-Omni 构建了全模态决策模型 SPEV，直接对原始音频输入输出决策概率，无需经 ASR 转写，避免转写带来的延迟与成本，并支持鸟鸣等非语音任务。它结合 Omni 音频/视频/图像解码器与训练的决策头，支持选择题、真假判断和序数评分，多个问题可在一次多模态前向传播中处理。
AuroraTTS-100K 是一个英文文本转语音模型，参数量不到 100K 即可生成基本可理解的语音。INT8 量化后仅占 127KB，在 CPU 上达 72 倍实时速度、GPU 上达 1120 倍；但遇到难词或长数字时可能含糊不清。
KittenML 发布 Kitten-TTS 2 的代码与权重，称其为首个 1.58-bit（三值）TTS 模型，1.7B 参数，仅靠 CPU 即可实时生成。支持少于 5 秒参考音频的 zero-shot 声音克隆、20+ 语言跨语言克隆，以及重音与情感表达控制；代码和权重开源，提供 GitHub 与 Hugging Face 链接，定位为 ElevenLabs 的开源替代。
推荐理由：1.58-bit 三值权重让这个 1.7B TTS 只靠 CPU 就能实时运行，对没有 GPU 的本地部署用户是可查的开源替代选项。
InclusionAI（蚂蚁集团支持）随 Ming-3.0-Audio-Tiny 一同发布了 0.5B 参数的 Ming-3.0-TTS-0.5B 语音合成模型。该模型支持语音克隆、语音设计、7 种语言以及情感与风格控制。
IBM 在 Hugging Face 发布 Granite Speech 5.0 系列：新增 granite-speech-5.0-2b 语音语言模型，并更新 granite-speech-5.0-470m-turboctc 和 granite-speech-4.1-2b-plus。2B 版支持六语种转录与翻译、2000 词关键词偏置，英文平均 WER 5.06%，在开源权重 ASR 模型中排名第 2；Turbo CTC 版扩展至七语种并提速约 1.6 倍至 19,870 RTFx；4.1 2B Plus 说话人归因与时间戳更准，长语音 WER 降 24%。三款模型均为 Apache 2.0 许可，支持 Transformers、vLLM、llama.cpp 等。
推荐理由：官方给出各模型在 Open ASR Leaderboard 上的 WER、RTFx 和说话人归因误差对比数据，读者可据此挑选适合的语音模型。
Kyutai 于 10 月 20 日发布三款更小的 Pocket TTS 模型，参数量分别为 1.9M、6.9M 和 18.2M，均为英语模型，支持声音克隆并设计为在 CPU 上运行，可在其 demo 中切换尺寸。作者认为实用之处在于让语音生成留在 CPU、把 GPU 留给本地 LLM，倾向从 6.9M 版本入手；参数量统计包含音频解码器，处理参考声音的编码器是独立的，参考音只需编码一次。代码与安装说明由 /u/BerryBlush_Rogers691 提交。
推荐理由：作者给出了把语音生成留在 CPU、把 GPU 让给 LLM 的本地部署思路，并指出参数量统计包含音频解码器这一细节。
Gradium 发布首个开源项目 Phonon，包含 31M 和 40M 两个可在设备端运行的小型 TTS 模型。推理栈完全开源，支持 10 多种后端（CPU、GPU、NPU），其中大部分用 Rust 编写。团队表示欢迎社区反馈，并计划推出更多开源版本。
inclusionAI 发布原生音频语言模型 Ming-3.0-audio-flash，为 MoE 架构，总参数 126B、每次推理激活 6.5B，采用 MIT 许可。模型接受音频加文本指令输入，支持语音识别、口语问答、音频理解与音频推理，可输出文本或可选合成语音，覆盖中英文及方言口音，另有 Flash 和 Tiny 两个版本。
inclusionAI 在 Hugging Face 发布紧凑型原生音频语言模型 Ming-3.0-audio-tiny，采用 MoE 架构，总参数 9.3B、每次推理激活 2.7B。模型接受音频与文本指令输入，支持中英文语音识别、口语问答、音频理解与音频推理，可选合成语音回复，支持长音频、多说话人和嘈杂环境，采用 MIT 许可证开源。
inclusionAI 在 Hugging Face 上发布 Ming-3.0-audio-flash，总参数 126B、激活 6.5B 的 MoE 模型，可接收音频加文本指令并返回文本或语音回复，MIT 协议。模型卡列出转写、口语问答、长录音理解及对语音、环境声和音乐的推理能力，中英文为主并声称支持口音、方言和嘈杂录音；语音输出依赖可选的 Talker，可用内置音色或参考音频。本地部署文档给出 Transformers、SGLang 和 vLLM-Omni 路径，其中 SGLang 文本输出验证配置用四张 GPU，vLLM-Omni 128K 参考配置用八张 80GB H800，均为参考配置而非最低要求。
AuroraASR-1M 发布，是一个仅 949K 参数的轻量级语音识别模型，采用权重共享 Conformer-CTC 架构，INT8 权重仅 1.06 MB。单 CPU 线程可达约 436× 实时速度，在 LibriSpeech test-clean 上使用贪心解码、无外部语言模型取得 11.43% WER，以 Apache 2.0 许可开源。
nineninesix 团队发布开源权重模型 Tyger，基于 NVIDIA Nemotron 3.5 ASR Streaming 0.6B 加 14M causal GRU，每 80 ms 无前瞻地在 answer、stop、chime in 三种状态间切换，实现语音 Agent 的全双工轮次控制，可同时听到麦克风和 Agent 自身回放以避免回声误判。配套 tyger-s2s（Apache-2.0）整合 Gemma 4 E4B FP8 与 VoxCPM2，支持工具调用和最多 4 路并发对话，RTX 5090 上从用户说完到首段音频约 0.7 秒；默认全本地运行，不外传音频和文本。限制：tyger-s2s 需 28 GB 显存，仅测过 5090，仅 FP32 未测量化，目前只有离线基准。
nineninesix 开放 TYGER 权重，单一模型同时处理 ASR 与全双工轮次控制，能识别说完、被打断和附和的 mm-hm。中位端点延迟 250 ms、80 ms 帧、无 lookahead；配套语音 Agent tyger-s2s 由 TYGER + Gemma 4 E4B + VoxCPM2 组成，单张 32 GB GPU 最多支持 4 路对话，目前仅支持英语。权重在 https://huggingface.co/nineninesix/tyger，代码在 https://github.com/nineninesix-ai/tyger-s2s。
推荐理由：作者给出端点延迟、帧长和单卡并发数等具体指标，可据此评估这套语音方案在本地部署的可行性。
Fish 昨日发布文本转语音模型 Drama 3（35B3A MoE），作者当天搭建了演示并实测。该模型在 DGX Spark 上运行良好，4bit 量化版本效果接近原版；可在 Hugging Face Space 试用或下载权重本地运行（https://huggingface.co/spaces/fishaudio/Drama-3）。
ASLP-lab 发布 SemBridge，通过共享语义 tokenizer 同时锚定声学潜变量与自回归语言模型状态，统一支持 TTS、按音符条件的歌声合成及语音与歌唱混合生成。2026 年 10 月已公开推理代码与模型检查点，代码采用 Apache-2.0 许可，输出为 44.1 kHz 单声道 WAV，默认 --max-patches 500 限制生成约 40 秒。
Cactus Compute 发布面向手机、可穿戴、机器人、智能家居和微控制器的端侧基础模型 Needle 3，整个模型是单个 8-29 MB 二进制文件，权重和各平台引擎已在 Hugging Face 开放。模型基于 Laddered Simple Attention Network，2 到 20 层每档深度都是可部署模型，在移动端工具调用上以牺牲通用对话能力换取超过 10 倍体积模型的表现，并支持结构化抽取、文本嵌入和同容器的语音转写模型 Whistle（16.9 MB，支持 7 种语言）。提供 needle finetune 本地 LoRA 微调与平台微调两种方式，DroidCall 微调使 4 层以上的子网络在 29M 参数起通过 DeepSeek V4 Flash。
推荐理由：Cactus 官方开源了面向微型设备的 Needle 3，并给出与 Whisper、DeepSeek 等模型的基准对比和完整微调部署路径，适合本地部署场景参考。
Neuphonic 团队以 Apache 2.0 协议开源 NeuDecide，该模型直接从音频和工具定义生成工具调用及参数，无需中间转写步骤，模型文件共 43 MB，可在单 CPU 线程推理。在 SLURP 工具任务（10 个工具）上达到 72.4% 工具准确率，约为 Nvidia Parakeet + Google FunctionGemma（24.4%）的 3 倍和 Cactus（Whistle + Needle，20.7%）的 3.5 倍；MacBook Pro M3 上 time to call 46 ms，Raspberry Pi 5 上 206 ms。
TII 在阿布扎比推出 1.6B 参数语音识别模型 Falcon-ASR，重点支持阿联酋方言，同时支持英语、法语、西班牙语和葡萄牙语。模型在六个阿拉伯语测试集上平均 WER 为 20.92%，优于所对照榜单最佳已发布结果 23.17%；内部阿联酋评测中 WER 22.73%、CER 10.19%，为对比系统中最低。模型支持词级时间戳，现已可在 Hugging Face Demo 试用，API 与原生应用已列入计划。
bilibili Index LLM Team 发布 Index-Translate 多语言翻译模型家族，基于 Qwen3.5，文本模型覆盖 150 种语言，提供 2B、9B 和 35B-A3B（preview）权重，已在 Hugging Face 和 ModelScope 开放。
推荐理由：原文给出了各尺寸模型的评测数字、量化版本和免费API入口，读者可以直接对比选型并上手部署。
Cactus Compute 发布面向超小型设备的语音识别模型 Whistle，文件仅 16.9MB，官方称多数场景优于 Whisper base，且体积小 9 倍、速度快 6 倍。
推荐理由：原文给出了与 Whisper base 在 LibriSpeech、FLEURS 等基准上的 WER 对比数据，可据此评估小体积语音识别模型的实际精度。
pyannote 在 Hugging Face 发布说话人日志管线 speaker-diarization-community-1，改进说话人分配与计数，并新增独占式说话人日志输出，便于与转写时间戳对齐。
推荐理由：原文给出十多个学术基准上的说话人日志错误率对比，读者可据此量化该模型相对上一代的实际提升幅度。
MiniMax 开源了 MiniMax H3 的 H3-Base 权重，该系统可统一理解文本、图像、视频与音频，并生成最长 15 秒、带 32 kHz 立体声的视频，768p 输出经 H3-Regenerate-2K 可达 2K。
推荐理由：原文给出 H3-Base 架构细节、权重拆分和 SGLang/vLLM/diffusers 部署命令，可据此自行本地部署复现。
GitHub 仓库 awesome-speech-ai 精选语音 AI 资源，覆盖 TTS、ASR、Voice Cloning、Audio Enhancement、Speech LLM、数据集与论文等分类。
FermionResearch 在 Hugging Face 发布 Phonon-2，称其为 900 MB 以下英文识别最准确的开源模型，在 Open ASR Leaderboard 七个英文测试集上平均词错率 5.21%，164 MB 体积达到 2.5 GB 教师模型 parakeet-tdt-0.6b-v3 的精度，编码器每个权重以约 2.1 bit 存储。
推荐理由：原文给出七套英文测试集的平均词错率和多平台实时率数据，可以据此比较小体积语音识别模型之间的实际精度差距。
NVIDIA 在 Hugging Face 发布开放权重模型 Nemotron-3-Diarization，用于判断真实音频中谁在何时说话，支持流式与离线推理，最多处理 8 个说话人。
推荐理由：模型卡给出与 diar_streaming_sortformer_4spk-v2.1 在多个基准和延迟档位下的 DER、SCA 与 RTFx 对比，读者可据此评估升级收益。
EMA Lightning 是一个开源（Apache 2.0）的土耳其语文本转语音模型，由 5.6M 参数 DiT 声学模型和 3M 参数 vocoder 组成，总计仅约 34 MB。在 Freya-TR-Eval 上 WER 为 0.92%，低于 ElevenLabs v4、Gemini 3.8 和 2.38B 参数的 Trendyol-TTS 等所有被测系统；在 RTX 4090 上首批音频仅需 3.86 ms，比实时快 440×（批处理达 1,316×）。模型可完全离线运行于 GPU 或 CPU，无需 API key，文本和音频不离开本机，成本约 $0.0085 per million characters。
Cactus Compute 团队发布面向手机、可穿戴、机器人、智能家居、汽车和微控制器的端侧语音识别模型 Whistle，整个模型为单个 16.9 MB 文件，无需 GPU 和外部依赖，与 Needle 共用同一运行时。支持英德法西意荷波七种语言的转写（单次最长 30 秒）、词级时间戳和语音嵌入，静音返回空文本而非编造句子。WER 基于 86,174 条语音实测，并用与 Whisper、Moonshine 已发布数据对比；精度为 Whistle 2 至 4 bit，Whisper fp32，Moonshine int8。
推荐理由：原文给出了完整的 WER 基准、精度设置和与 Whisper、Moonshine 的对比口径，读者可以据此评估端侧语音识别的实际表现。