JackIn Eye

JackIn: Integrating First-Person View with Out-of-Body Vision Generation for Human-Human Augmentation

Shunichi Kasahara and Jun Rekimoto
ACM Augmented Human 2014 · Best Presentation Award

Sony CSLと東京大学の共同プロジェクト（2014年）。

JackIn Eyeは，人間が他の人間の環境に没入し，その状況や体験を共有したり共同作業を行ったりする際のインタラクションの枠組みである．このようなインタフェースは，現場の作業を遠隔地の専門家が支援したり，現地での体験を他の利用者に伝送する，遠隔から作業者を誘導する，などの応用に適用できる．Bodyと呼ぶ，実環境にいる利用者の一人称映像を遠隔地の利用者(Ghost)が観測し状況を共有する．さらに，Ghostが自由な視点位置で環境を観測することを可能にするために，一人称映像のシーケンスからSLAMに基づいて空間をモデリングし，擬似的にGhostの視点外から状況を観測することを可能にする「体外離脱視点」を提供する．これにより，GhostはBodyに追従しながらも独立な視点で環境を観測することができ，一人称映像特有のモーションシックネス問題も解決することができる．また，GhostがBodyを効果的に支援できるように，Bodyの視野外にある事物をポインティングするための視覚化技法を提案する．

Bodyは透過型ヘッドマウントディスプレイと頭部カメラを装着する。料理のレッスン、買い物の案内、工作や電気作業の指導、スポーツやライブイベントの体験共有などへの応用を想定している。評価実験では、GhostがBodyの置かれた空間的な状況を理解できることを確認した。

東京大学暦本研究室：https://lab.rekimoto.org/projects/jackineye/

Reference

Shunichi Kasahara and Jun Rekimoto. 2014. JackIn: Integrating First-Person View with Out-of-Body Vision Generation for Human-Human Augmentation. In Proceedings of the 5th Augmented Human International Conference (AH ’14). Association for Computing Machinery, New York, NY, USA, 1–8. https://doi.org/10.1145/2582051.2582097

BibTeX

@inproceedings{10.1145/2582051.2582097,
  author    = {Kasahara, Shunichi and Rekimoto, Jun},
  title     = {JackIn: Integrating First-Person View with Out-of-Body Vision Generation for Human-Human Augmentation},
  booktitle = {Proceedings of the 5th Augmented Human International Conference},
  series    = {AH '14},
  year      = {2014},
  pages     = {1--8},
  publisher = {Association for Computing Machinery},
  address   = {New York, NY, USA},
  doi       = {10.1145/2582051.2582097}
}

笠原俊一, 暦本純一, JackIn: 一人称視点と体外離脱視点を融合した人間－人間オーグメンテーションの枠組み,情報処理学会インタラクション2014 ベストペーパー賞/ベストインタラクティブ発表賞