情報処理学会 インタラクション2024

本研究では，ユーザの振る舞いから重要シーンと注目対象を推定することを目的とし，非言語行動を手がかりにすることで振り返りを容易にする手法を作成することを目指す．本稿では，ユーザの非言語行動に注目し，視線を推定する手法を提案する．胸部の魚眼カメラと頭部の視線計測装置を同時に装着して記録したデータをもとに，MonoEyeを用いて姿勢・視線ペアのデータセットを作成した．LSTMを用いたモデルでデータセットを学習させた結果，屋外データを学習させたモデルに置いて，データセットに含まれている，いないに関わらず一部視線を推定できたため，非言語行動から視線を推定できる可能性が示唆された．今後はより多くの状況下でデータを収集して性能向上を図り，興味領域からの重要シーン推定を目指す．