音源分離技術を用いた、観客からのリクエスト楽曲を即興でリミックスするシステムの制作

小原開
長谷川遼
西門亮
髙梨大
徳井直生

本研究は、音楽ストリーミングサービスを通して、オンラインライブなどの観客(オーディエンス)からリクエストされた楽曲に対し、ループ音源抽出アルゴリズムを使用、そこから周期性のある 8 拍のループ音源を作成。 作成されたループ音源に対し、深層学習による音源分離モデル[2]を使用する。そこで分離した 4 つの楽器 (Bass,Drum,Vocal,Other)ごとの音源から、さらにループ音源を作成するシステムの制作を行った。 これにより、オーディエンスそれぞれからリクエストした複数楽曲を即興で編集、重ね合わせて再生(リミックス)す ることが可能になった。

論文提出先:INTERACTION2022

論文リンク

Share your thoughts