情報処理学会 インタラクション2020

本研究では，360度動画内における対象の映像と音を選択的に削除し補完する手法を提案する．従来の動画補完は，削除対象の映像のみを動画から削除するため，何もない場所から音が聞こえてくるといったように映像と音に矛盾が生じていた．本研究ではこの問題を解決するために，削除対象を360度映像上で追跡し，削除対象の方角に対応する音を特定する．これにより，360度動画から削除対象の映像と音を同時に削除し，補完した360度動画の生成を可能とした．本手法の有用性を示すために主観評価実験を行った．主観評価実験を通して，提案手法は実験参加者にとって自然で満足度の高い360度動画を生成し，体験の質を高めることを確認した．