留学内容
シンガポールのSingapore Management UniversityでAR(Augmented Reality)に関する研究の留学をしてきました.研究内容としては,ヘッドマウント型のデバイスを装着した状態で実世界にあるコップや本,ペットボトルのような実オブジェクトをユーザが選択するための手法の開発でした.例えば,ユーザが棚の中にある薬を選択するとその薬の情報をヘッドマウントディスプレイに表示してくれたり,ロボットが取って持ってきてくれたりと応用が考えられます.私たちの手法では,デバイスから得られる画像からオブジェクトを識別し,ユーザの指の動きや発言からユーザが選びたいオブジェクトを選択します.留学期間でこの手法の考案から実現のための実装を行いました.