HoloLensで手の位置やタップ情報と、スぺ―シャルマッピングを利用して地面からバーチャル木を生み出してみたデモです。
HoloLensで見ている世界の映像を機械学習エンジンTensorFlowに送り、物体が何であるかを判別します。 微妙な結果も学習を進めれば百発百中になってゆくことでしょう。
物体をHoloLensで見つめるとその形状からそれが何であるかを判定します。 認識にはVuforiaのオブジェクト認識機能を利用しています。