Edge0 发布 Audio8-TTS-Realistic:0.6B 开源语音克隆 TTS 模型
Edge0 发布开源权重语音克隆 TTS 模型 Audio8-TTS-Realistic,601M 参数,支持 23 种语言,权重与代码以 Apache 2.0 发布。模型只需 1 段参考音频及对应文本即可零样本克隆音色,也可在无参考音色时直接生成语音。自报结果显示其在 CV3 九语言上平均错误率 4.86%,低于 Qwen3-TTS-1.7B 的 7.73%,但在 MiniMax 基准上落后于 4B 级模型,泰语 WER 达 48.57%。
重 0.7,SIM 权重 0.3。 由学习到的真实感评判器引导的 GRPO。 该评判器将每个输出与同一句话的匹配人类录音进行评分。它是在由 6 个开源 TTS 系统构建的质量阶梯上训练的。这些系统在一项私密盲听研究中排名,人类录音位居榜首。合成停顿压缩为阶梯增加了更细的层级。 身份擦除损失可阻止评判器奖励生成器指纹。评判器头在冻结的 WavLM-large 编码器之上约有 3M 参数。当时长超过参考长度的 1.35 倍时,还会触发时长惩罚。这阻止策略通过更慢的语音来钻评判器的空子。 最终阶段仅使用中文和英文提示。它仍然改善了 13 种低资源语言的两项聚合指标。它们的错误率从 22.53% 降至 20.77%,SIM 从 0.637 升至 0.679。 它在基准测试上表现如何? 以下所有数字均为自报错误率,越低越好。 Seed-TTS(英语/中文):平均错误率 1.25%,SIM 0.704。 CV3(9 种语言):平均错误率 4.86%,SIM 0.661。 MiniMax(24 种语言):平均错误率 5.89%,SIM 0.754。 在 CV3 上,Audio8 优于 VoxCPM2
匹配字段正文


