視線トラッキングを利用したシーン変更を視野内で適用するソフトウェアシステム

Mise-Unseen: Using Eye Tracking to Hide Virtual Reality Scene Changes in Plain Sight [1]

多くの仮想現実アプリケーションでは、実行時にオブジェクトを作成または配置する必要がありますが、そのような変更はユーザーの視野内で発生すると認識されます。
Microsoft Researchに所属する研究チームが、シーンの変更をユーザーの視野内でひそかに適用するソフトウェアシステムであるMise-Unseenを開発し、2019年度のUIST会議にて発表しています。

MiseUnseenは、視線追跡を利用してユーザーの注意、意図、空間メモリのモデルを作成し、変更を加えるかどうか、いつ行うかを決定します。
ビュー内のシーンを目立たないように変更するためのMise-Unseenの7つのアプリケーションを提示します(i)タスクの難易度がユーザーに適応することを隠すため、(ii)ユーザーの好みにエクスペリエンスを適応させるため、(iii)低忠実度の効果、(iv)物理的な小道具がなくても受動的な触覚のユーザー選択を検出する、(v)物理的なスペースがなくても物理的な移動を維持する、(vi)仮想移動中の乗り物酔いを減らす、および(vii)確認するストーリーの進行中のユーザーの理解。

本システムを15人の参加者によるユーザー調査で評価したところ、視線データは実際に視野内での難読化の変更をサポートはするそうですが、視線を一般的なマスキングテクニックと組み合わせて使用​​すると目立たないようになるそうです。

[1] : Marwecki, S., Wilson, A. D., Ofek, E., Gonzalez Franco, M., & Holz, C. (2019, October). Mise-Unseen: Using Eye Tracking to Hide Virtual Reality Scene Changes in Plain Sight. In Proceedings of the 32nd Annual ACM Symposium on User Interface Software and Technology (pp. 777-789). ACM.

URL : https://dl.acm.org/citation.cfm?doid=3332165.3347919