情報処理学会 インタラクション2019

映像と音楽の結合を行うためには，両者の時間的な同期のみならず，映像の内容や文脈といった意味理解を音楽に結びつけることが重要な課題となっている．本研究では，映像をもとに自動的な音楽生成を行うための一つのアプローチとして，映像内の物体検出および凸包を用いた分析による手法を提案する．これを実装したシステムの展示を行い，51人にアンケート調査を行ったところ，73%の回答者が生成された音楽と映像が合っていると感じていたことがわかった．また，その要素として多くの評価を得た「物の動き」「物の種類」について考察を行った．