情報処理学会 インタラクション2026

IT技術の発展により，日常生活でIT機器を利用する機会は年齢を問わず増えている．しかし，キーボードやマウスなど従来の入力手段は習熟が必要で，IT操作に不慣れな利用者には負担となる場合がある．この課題に対し，手や指の動きを直接入力として用いるハンドジェスチャ操作は，身体の動きと操作結果の対応が直感的で，事前学習の負担を軽減できる入力手法として注目されている．一方で，既存手法の多くは画面接触や専用デバイスを必要とするため，使用環境の制約や装着の負担，導入コストといった課題がある．本研究では，汎用的なWebカメラ映像を用い，MediaPipe Handsによって手指の動きを高精度に推定し，ハンドジェスチャでIT機器を操作する手法を提案する．検証には，教育分野での利用実績がある高拡張性のサンドボックス型3Dゲーム「Minecraft Java Edition」 を採用し，先行手法との比較実験と操作性アンケートを実施した．その結果，回答者の93.3％が本手法をより直感的と評価した．以上の結果から, 提案手法は操作性の向上に寄与することが示された.