情報処理学会 インタラクション2018

一般的にプログラミングは，モニタの前でソースコードを視認しながら，キーボードを打って行う．しかし従来のプログラミング方法は手を動かしての入力とモニタからの視覚情報の提示を必要とする．本稿では，この問題を解決するために，発声の伴わない口の表情を入力とし聴覚情報の提示でデバッグを行うシステムを提案する．外部に音声に漏らすことなく使用可能な口の表情を5種類マスク型デバイスで識別して，ソースコードの読み上げとバグの検出および記録を操作するシステムを実装した．マスク型デバイスの精度実験とシステムのユーザスタディを行った．