跳到正文
arXiv cs.AI· Gabriel Clark, Sofian Mejjoute, George Close, Beren Millidge·· 1 天前AI 评分58

ZONOS3-Mini 技术报告:可在笔记本和手机实时运行的零样本语音克隆 TTS 模型

ZONOS3-Mini Technical Report

AI 导读

ZONOS3-Mini 是一个超紧凑、超快的零样本语音克隆 TTS 模型,可在笔记本或智能手机上实时运行。模型采用仅 886M 参数(每 token 激活 100M)的潜空间 MoE 骨干,并配套新的音频编解码器 Zyphra Audio Codec 1(ZAC-1),以 15 Hz 帧率表示 44.1 kHz 音频。

正文 · AI 翻译

查看 PDF HTML(实验性)

摘要:ZONOS3-Mini 是一个超紧凑、超快速的零样本语音克隆 TTS 模型。该模型可以在笔记本电脑或智能手机上实时运行。就其延迟和规模而言,它达到了最先进的准确度和克隆保真度。为实现这一点,我们提出了一个仅含 886M 参数(每个 token 激活 100M)的潜在 MoE 主干网络,以及一种新的音频编解码器 Zyphra Audio Codec 1(ZAC-1),它以 15 Hz 帧率表示 44.1 kHz 音频。在新的 ZTTS2-Eval 基准上,ZONOS3-Mini 在 55 个语言集(35 个干净集和 20 个真实场景集)上达到 6.71% 的宏平均 WER,这与更大、更慢的最先进模型相比具有竞争力。我们发布了模型权重、推理和训练代码。
评论: 19 页,4 幅图,12 张表。模型权重:此 https URL ;代码:此 https URL
主题: 声音(cs.SD);人工智能(cs.AI)
引用为: arXiv:2611.16525 [cs.SD]
  (或 arXiv:2611.16525v1 [cs.SD] 用于此版本)
  https://doi.org/10.48550/arXiv.2611.16525

由 DataCite 颁发的 arXiv DOI(待注册)

提交历史

来自:Gabriel Clark [查看电子邮件]
[v1] 2026 年 11 月 12 日星期四 09:24:22 UTC(328 KB)

来源:arXiv cs.AI · arxiv.org