开源音乐生成与编辑框架,歌词成曲、零样本翻唱、对话改谱重渲新曲
multimodal-art-projection 团队(HKUST、M·A·P 等机构参与)开源的音乐生成与编辑框架, 三条创作路径:歌词+风格写谱成曲、源录音零样本翻唱、agent 对话改谱重渲新曲, 旋律与和弦以符号乐谱显式呈现,人与 agent 都能检视编辑。 分段 Python API 依次 plan()→generate_semantic()→synthesize()→decode(),输出 48 kHz 立体声; yue2-music agent skill 让 agent 生成歌曲与器乐、转写翻唱录音、编辑 ABC 乐谱, 翻唱与改谱依托 SheetSage2 转写模型。 代码 Apache-2.0,模型权重 CC BY-NC 4.0,GitHub 10.8k stars(2026-10-05)。 本地生成需 Linux、Python 3.12 与 24 GB 显存的 NVIDIA GPU; 另有浏览器内免费在线试用(NOIZ 托管),第三方项目 Maestro 亦已集成。


暂无相关文章。