各デバイスの入力手法を評価する

ユーザによるコンピュータへの文字入力や操作は、かつてはキーボードとマウスが主流でした。しかし現在はスマートフォンをはじめとするタッチ型デバイスの普及が進み、音声入力のような新しい入力方式も台頭しています。

我々の研究は、従来のキーボードとマウスに加えて、スマートフォンのタッチ動作も含めた、各種デバイスの入力手法の、多角的でかつ量的なデータを収集・評価するシステムの構築を目指しています。

視線の移動を追跡する装置は高い

特に、これまでの研究では入力時に手指の動作や視線の移動といった動作様態のデータを、低コストに収集する環境はありませんでした。

特に視線の移動を正確に捉える装置はこれまで販売されていたのですが、安価なものでも1台50万円以上します。おいそれと購入できず、また同時に何人も実験しようとすれば人数分必要となり、とても高価です。

そのため、多少の正確さを犠牲にしても、可能な限り安価で身近な機器での代用が求められます。

身近な機器でデータ収集を低コストに

我々は様々な機器で試した結果、3台のWebカメラと一般的なPC、それに無料の手指・顔認識ライブラリ MediaPipeを使ってシステムを構築しました。Webカメラは、1台1000円代の非常に安価なものです。この安価なシステムによって、両手指と視線の動きを検出し、入力動態をリアルタイムで記録できます。