情報処理学会 インタラクション2021

本論文ではGANを用いた音源分離手法と，その音源分離技術を用いた耳コピ・アドリブ練習支援アプリケーションの開発について述べる．様々な楽器で演奏されている多重奏から各楽器の音を分離する音源分離技術を利用し，多重奏から選択した楽器の音のみ抽出することで耳コピの支援を行う．また反対に選択した楽器の音を消去し，消去した箇所に合わせて自分で演奏することでアドリブの練習を行うことも可能にする．また音源分離の精度を向上させるためGANを用いた音源分離手法の提案を行う．音をスペクトログラムに変換し，多重奏のスペクトログラムと各楽器のスペクトログラムをペアでGANで学習させ分離モデルを作成する．分離させたい多重奏のスペクトログラムにその分離モデルを適用させることで各楽器のスペクトログラムを生成する．