スマートグラスにおける直感的テキスト入力の研究
https://scrapbox.io/files/6247c3cb0ee89d001ffa39d2.png
単語候補と文章候補を組み合わせたスマートグラスのサジェストシステム
このシステムでは, 見ている対象のキーワードを選択するだけ操作で文章入力ができる. これまでのスマートグラスのテキスト入力に関する研究はできるだけ正確に速く入力することを目指したものが多い. しかし, スマートグラスでは, 入力しようとした文章を一文字ずつ時間をかけて入力するよりも, およその内容をすばやく入力できる方がユーザーにとって好ましいということが考えられる.
視界画像を利用した予測による提案システムを実装し, 使用場面を想定したユーザー実験を行った.
実装
Unity
Python
YOLO
Image Caption Generator
HoloLens
林 健太郎, 入江 英嗣, 坂井 修一:
「単語予測と文章予測によるスマートグラス向けサジェストシステム」,
インタラクティブシステムとソフトウェアに関するワークショップ, Sep., 2019.
WISS2019 ロングティザー発表
2019/9/25 - 9/27
https://youtu.be/me0RtZYpHXw