dlb2018-team16 / DeepAlbum

5 stars 0 forks source link

Music VAE #3

Closed hadusam closed 5 years ago

hadusam commented 5 years ago

Training

@yushinna さんがコミットしてくれたyonezuデータセットで1.5日くらい学習を回した結果、一応yonezuモデルっぽいものができた。 スクリーンショット 2019-03-25 15 51 38

このモデルを使ってランダムに生成したmidiは下記。 run_yonezu_1.tar.gz

それっぽいメロディが生成されているため(というか複数の曲を切って貼った感じ?)学習はうまくいっていると思われる。 が、一部、元データのMelodyそのままのような箇所がある(ランダムの空間ベクトルがたまたま元データに近いものだったのかも)

Next

yurfuwa commented 5 years ago

東方データセット322個です。学習でご利用ください 語尾なにもなし : トラック分割無し 語尾_1 : 主旋律 語尾_2: ベース ~splited_midi.zip~ データセット公開は問題があるので削除

yurfuwa commented 5 years ago

東方モデルから生成した楽曲の中で、メロディがよかったものを厳選 keep_generated.zip

hadusam commented 5 years ago

2曲のサビの位置を合わせてMusicVAEの学習済みモデルでInterpolate(補完)をした場合、ちゃんとサビのような盛り上がりを表現できた。Aメロ、Bメロ、サビの構成を意識してそれぞれで合成すればいわゆる曲全体を合成できそう。 image

MusicVAEで生成したmidiはrandom sample, interpolateの両方をdriveにまとめておいておきましたー