情報処理学会 インタラクション2021

本論文では，実空間での対面コミュニケーションを支援するために，ユーザの顔の表情全体をアバタの表情に反映させることができる薄型のデジタルフルフェイスマスクディスプレイ「デジタルカメン」の設計と実装について述べる．カメラを用いた表情認識技術により，アバタによる顔の拡張が可能になったが，その応用は仮想空間での対面コミュニケーションに限られていた．本研究では，実空間でのアバタによる顔の拡張を可能にするために，軽量でフレキシブルなディスプレイと表情認識器を統合したデジタルカメンを提案する．顔全体に分散した40個の光センサから構成される光センサアレイを用いて表情を推定するため，カメラによる表情認識と異なり近接で表情認識できる．機械学習アルゴリズムの1つであるSVM (Support Vector Machine)を用いた10クラスの表情認識モデルを構築する．提案する表情認識モデルの平均正答率は79\%であった．被験者にデジタルカメンを装着してもらい，鏡越しにデジタルカメン上に表示されるアバタを見てもらった．装着者自身の表情に同期して変化するアバタの表情変化は，アバタ再現性やアバタの表情変化の応答性という評価指標において，カメラベースの表情認識およびその結果を表情付アバタとして生成および表示する機能をもつ従来手法（e2-Mask）と比較して同程度の結果が得られた．