search

beiciliang / intro2musictech

公众号“无痛入门音乐科技”开源代码
173 stars 20 forks source link

有没有音乐生成方面的资料可供参考？ #3

Open LmYjQ opened 5 years ago

LmYjQ commented 5 years ago

大佬你好，我是从知乎->博客->公众号一路追过来的。看了你写的东西以后有两个想法，想请教一下有没有（大概率有吧）前人做过类似的东西？

  1. 音乐风格转换：例如jacques loussier改编的很多曲子，把古典音乐改编成爵士风格
  2. 音乐到图像转换：比如把拉赫的《音画练习曲》转化成画，或者音乐+一些文本转化成画

感谢感谢，祝博主论文顺利～

beiciliang commented 5 years ago

(｡･∀･)ﾉﾞ嗨！辛苦你一路追过来😂我对音乐生成的了解并不多，只能解答下第一个问题。

去年Facebook团队有做出过类似工作，他们声称是”风格转换”但更多的重点在于“乐器音色转换”。可以看视频demo感受一下，具体细节参考论文Mor, N., Wolf, L., Polyak, A., & Taigman, Y. (2018). A Universal Music Translation Network. arXiv preprint arXiv:1805.07848。

关于风格转换的定义，也有许多解释，可以参考Dai, S., Zhang, Z., & Xia, G. (2018). Music style transfer issues: A position paper. arXiv preprint arXiv:1803.06841.

第二个问题不清楚，毕竟音乐生成还做的不咋地呢，多模态转换就更有难度了吧。

LmYjQ commented 5 years ago

果然在github提issue回复的快哈哈。先学习学习，回头再来请教～

LmYjQ commented 1 year ago

当年提这个问题的时候根本想不到现在会有GPT这种东西出现，期待贝茨讲讲音乐大语言模型～