[程序员] [开源分享] 发现一个挺有意思的 TTS 项目 VoxMel,直接在 Mel 频谱上做自回归生成
最近关注到一个挺有意思的开源 TTS 项目: VoxMel 。 GitHub: https://github.com/VoxDance-Lab/VoxMel Twitter: https://x.com/_akhaliq/status/2120749548851368358 现在不少自回归语音生成模型会依赖学习式声学 Tokenizer,先把音频离散化再进行建模。 VoxMel 的思路有点不一样,它尝试直接在连续 Mel 频谱上做自回归生成,不依赖学习式声学 Tokenizer,同时通过小波分解来组织不同尺度的声学信息。 感觉这个方向还挺值得探索的,毕竟如何在不引入离散声学 Token 的情况下实现高质量语音生成,一直是个挺有意思的问题。 项目已经开源了代码、模型和技术报告,也有音频 Demo 可以试听。 分享给同样关注 TTS、语音生成方向的朋友,感兴趣的可以看看实现,也欢迎一起讨论这种建模路线的优劣。 觉得不错的话感觉可以顺手支持个 Star ⭐
Read original sourceSource record
Research analysis
Project record
Source account: 最近关注到一个挺有意思的开源 TTS 项目: VoxMel 。 GitHub: https://github.com/VoxDance-Lab/VoxMel Twitter: https://x.com/_akhaliq/status/2120749548851368358 现在不少自回归语音生成模型会依赖学习式声学 Tokenizer,先把音频离散化再进行建模。 VoxMel 的思路有点不一样,它尝试直接在连续 Mel 频谱上做自回归生成,不依赖学习式声学 Tokenizer,同时通过小波分解来组织不同尺度的声学信息。 感觉这个方向还挺值得探索的,毕竟如何在不引入离散声学 Token 的情况下实现高质量语音生成,一直是个挺有意思的问题。 项目已经开源了代码、模型和技术报告,也有音频 Demo 可以试听。 分享给同样关注 TTS、语音生成方向的朋友,感兴趣的可以看看实现,也欢迎一起讨论这种建模路线的优劣。 觉得不错的话感觉可以顺手支持个 Star ⭐
Observed adoption & comparisons
Recent records to compare: “ersinkoc/phonebox” (Trendshift, Nov 17, 2026); “elementalsouls/Claude-BugHunter” (Trendshift, Nov 17, 2026). Shared themes are navigation hints; they have not been verified as the same need or independent corroboration.
Adoption decision
Evaluate it against the tool or manual workflow it would replace. The stored record supports discovery; it does not yet establish reliability, lower operating cost or commercial adoption.
Unverified requirements
Not verified: license permissions, required hardware, installation steps, maintenance status and a representative task with its failure cases.
Next test
Choose one real task and a current alternative. Record the commit, environment, input, output, elapsed time and failure behavior; retain the result before recommending adoption.