如果有帮到你，欢迎「收藏」和「鸡腿」
生成 | 歌声合成 | 音乐理解 | 在线平台
全部开源/免费信息已标注，含直达官网链接。
1️⃣ 音乐生成类大模型
| 名称 | 机构 | 亮点 | 开源 | 官网 / 试用入口 |
|---|---|---|---|---|
| Stable Audio 2.0 | Stability AI | 文本→完整歌曲，立体声 48 kHz | ❌ | https://stableaudio.com |
| MusicGen | Meta | 最高 30 s 文本生成，可旋律条件 | ✅ | https://github.com/facebookresearch/audiocraft |
| Jukebox | OpenAI | 带歌词、多风格、1 分钟长度 | ✅ | https://github.com/openai/jukebox |
| Riffusion | 社区 | 实时扩散模型，可玩 Demo | ✅ | https://riffusion.com |
| Sunno V3 | Sunno AI | 中文歌词友好，一键成曲 | ❌ | https://suno.com |
2️⃣ 歌声合成 / 变声
| 名称 | 功能 | 亮点 | 开源 | 官网 / 仓库 |
|---|---|---|---|---|
| RVC | 实时音色转换 | 5 s 克隆，社区模型最多 | ✅ | https://github.com/RVC-Project/Retrieval-based-Voice-Conversion-WebUI |
| So-VITS-SVC 4.0 | 歌声转换 | 高保真，二次元常用 | ✅ | https://github.com/svc-develop-team/so-vits-svc |
| DiffSinger | 可控歌声合成 | 音高/情感/节奏全控制 | ✅ | https://github.com/MoonInTheRiver/DiffSinger |
| VITS2 | 多说话人歌声 | 多语种，轻量部署 | ✅ | https://github.com/jaywalnut310/vits2 |
3️⃣ 音乐理解 & 分析
| 名称 | 任务 | 亮点 | 开源 | 官网 / 论文代码 |
|---|---|---|---|---|
| MERT | 音乐情感/标签 | Transformer 骨干，下游全能 | ✅ | https://github.com/yizhi-wang/MERT |
| CLaMP | 音乐-文本跨模态 | 文本搜歌 / 歌搜文本 | ✅ | https://github.com/CLaMP-Team/CLaMP |
| Jukeformer | 结构分析 | 旋律/和声/节奏一键解析 | ✅ | https://github.com/retrofuturist/jukeformer |
4️⃣ 在线平台（免部署，可立即玩）
| 平台 | 类型 | 免费额度 | 官网 |
|---|---|---|---|
| Udio | 文本→完整歌曲 | 每日 10 首 | https://www.udio.com |
| Suno | 歌词+旋律 | 每日 5 次 | https://suno.com |
| Soundraw | 背景音乐/BGM | 免费试用 7 天 | https://soundraw.io |
| Boomy | 极速生成 | 免费保存 3 首 | https://boomy.com |
🛠️ 快速选型建议
| 需求 | 直接选 |
|---|---|
| 想最快出歌 | Suno / Udio |
| 要开源自己改 | MusicGen / DiffSinger |
| 做 AI 翻唱 | RVC / So-VITS-SVC |
| 写论文/搞理解 | MERT / CLaMP |
绑定
bd
bd
bd