一个让文本模型生成音乐的想法

hao3502026-10-03
25412
佬们，我想到一个想法，能不能让文本模型生成一段类似于乐谱的东西，然后让软件演奏出来，这样生成音乐可不可行 ^-^
主楼
席乐2026-10-03
18922
可行，生成简谱五线谱，你需要设计一个数据交换标准喂给它
否则它生成出来的文本你没法有效转成音乐
甚至可以 computer use 让它操作 xstudio 直接写歌写曲
网易的，直接能生成歌声乐器声
#1
dvdbv2026-10-03
22640
其实已经有了，甚至有生成乐谱，然后用音乐模型演奏出来的，参考 yue2
#2
link2026-10-03
5808
生成 midi 格式，直接 web audio 或找一个 SF2 音色包来快速演奏调试。
并且文本模型甚至可以直接合成人的发声，opus 对声谱图的造化很高，手搓 .wav。前天脑洞大开，让他不准用扩散模型，给我说"伊苏尔德"、“痛，太痛了!”
#3
虹夏2026-10-03
25413
不用那么麻烦，直接让agent搓midi就行了
#4
Railgun2026-10-03
24752
可以，compute use能直接操作宿主进行编曲，或者让agent直接生成midi
不过让llm通过mcp直接连接宿主或者干脆是编曲harness这类形态还没怎么见过（不好用^-^）
#5
꧁༺◇𝐴𝑣𝑒𝑟𝑖𝑡𝐴且𝖠𝗏𝖾𝗋𝗂𝗍𝖠之𝕬2026-10-03
8060
我之前让Opus5.5用mcp连接宿主，它自己写midi，尝试了几遍，效果还不错（加上computer use也许就可以自己调vst插件了？效果应该会更好）
Opus 5.5编曲效果超过我这个初学者了… - 搞七捻三 - LINUX DO
#6

发表回复

登录后回复