爱可可-爱生活
25-09-28 13:00 微博认证:AI博主 2025微博新锐新知博主

在线音频压缩领域的创新项目来了!

DAC-VAE(Descript Audio Codec 的变体) 是一个基于变分自编码器(VAE)的高保真音频压缩开源项目,改良了原版 DAC,将离散量化替换为连续潜变量表示,支持24kHz音频压缩,兼顾高质量与高效编码。

项目特点:

- 用 VAE 替代原始 DAC 的 RVQGAN 架构,实现连续潜空间表达
- 保持原有编码器-解码器架构,支持多尺度判别器提升音质
- 支持多种音频类型(语音、环境音、音乐等)统一压缩
- 训练与推理代码开源,方便自定义和扩展
- 灵活压缩率,结合重构、KL散度和对抗训练目标

适合音频处理研究者和开发者,提供了详细的训练教程和多GPU支持。

GitHub地址:
github.com/primepake/dac-vae

主要功能:

- 高保真神经网络音频压缩
- 24kHz采样率音频编码
- VAE连续潜空间,替代离散码本量化
- 多尺度判别器实现更优重构质量
- 完整训练、评估和推理脚本

发布于 北京