【Unite 2018 Tokyo】Windows Mixed Reality 最新アプリ開発情報 ～HoloLens からVRまで～

2018/5/7-9 Windows Mixed Reality 最新アプリ開発情報 ～HoloLens からVRまで～ 高橋 忍 shinobu takahashi 日本マイクロソフト株式会社 / テクニカル エバンジェリスト

高橋 忍 shinobu takahashi 日本マイクロソフト株式会社 / テクニカル エバンジェリスト 三菱重工業名古屋 航空宇宙システム製作所 ヘリコプタ技術部 電子装備設計課 - SH-60K AutoPilot プログラム開発 日本マイクロソフト株式会社 Application Development Consultant Technical Evangelist - Application Development Evangelism Windows Client / Mixed Reality Microsoft Azure shinobu.takahashi@microsfot.com @shinoblogavi shinoblogavi

Agenda Microsoft Paint 3D Remix 3D Mixed Reality Viewer PowerPoint Mixed Reality Mixed Reality HoloLensとMR device UWP Application Development HoloLens 開発 MR Device(VR) 開発 Toolkit

Microsoft

3Dの民主化を目指す より簡単に3Dを扱えるようにするために ✓ Paint 3D (Easy Modeler) ✓ 3D Builder (Modeler) ✓ Remix 3D (SNS) ✓ Mixed Reality Viewer (Viewer) ✓ PowerPoint (Office Tool)

Demo 3D on Windows 10

Mixed Reality

Mixed Reality とは

Mixed Reality Spectrum PHYSICAL REALITY MIXED REALITY (MR) AR TODAY D I G I TA L REALITY VR TODAY WINDOWS MIXED REALITY

Mixed Reality Devices for Reality 現実世界の補完 人口世界の構築 現実経験の補完

Microsoft Layout

HoloLens

Microsoft HoloLens スタンドアロン型 ホログラフィックコンピューター

Demo 会場スキャン再び

空間認識：現実空間 = Mesh + Collider

空間：Unlimited Desktop

Microsoft HoloLens はホログラムの音の合成と再生に対応。ユーザーが移動しても音声が聞こえるため、現実世界と 一体化した臨場感あふれるホログラム体験が実現されます。

HoloLens Spring 2018 Update アプリ起動時のウィンドウの自動配置 モード切替なしにアプリケーションウィンドウを直接操作 両手を使ったジェスチャー（拡大縮小、回転など） 音声コマンドの拡張（英語のみ） ボタン操作による画面録画 ファイルエクスプローラーが使用可能に MTP対応となり、接続されたPCからHoloLens内のファイルを操作 セットアップ中の認証が必要なWiFi利用が可能に 空間認識の制度が向上

Demo HoloLens Spring 2018 Update

Microsoft ストアで販売中 英語のみサポート HoloLens Development Edition 333,800 円 (税込) 最大 5 台まで購入可能 HoloLens Commercial Suite 555,800 円 (税込) 企業向け (Commercial Suite には Development Edition デバイスと 各種エンタープライズ機能、保証が付属) 詳細については www.hololens.com を参照 認定リセラー様 JBS様

Immersive Device Windows Mixed Reality Devices

Windows Mixed Reality Devices Immersive headsets Powered by Windows Mixed Reality

Demo Mixed Reality Portal

接続 World Scale USB 3.0 HDMI Bluetooth

PC VR HMD Specifications Device WinMR Oculus Rift HTC Vive Vive Pro PSVR Screen 2880x1440 2160x1200 2160x1200 2880x1600 1920ｘ1080 Refresh 60Hz/90Hz 90Hz 90Hz 90Hz 90Hz/120Hz FOV 90-105° 110° 110° 110° 100° Position insideout IR Sensor IR Sensor IR Sensor Camera Controller Stick/Pad Stick/Finger Pad External GPU HD620- GTX1050Ti Tracker Tracker GTX1060- GTX1060 -

HTC VIVE Pro & Samsung ODYSSEY Screen : Dual AMOLED Resolution : 2880x1600 pixels Field of View : 110degrees

アプリは Universal Windows Platform Application のみ アプリの入手は Microsoft Store から（もしくは Side Loading） Win 32 / Desktop アプリ（exe/com）は動作しません。（Unityのプラグインに注意） 2D 3D

Application Development

3D アプリ開発テクノロジ

3D アプリ開発ツール・環境

3D アプリ開発ツール・環境

HoloLens Remoting Player (Microsoft Store)

Device Portal / Microsoft Hololens app https://HoloLensのIPアドレス/ http://127.0.0.1:10080 Device Portal の機能はWeb API 化されている → アプリが作れる Mixed Reality Companion Kit / Mixed Reality Commander https://github.com/Microsoft/MixedRealityCompanionKit

• https://hololensのipアドレス/
• http://127.0.0.1:10080/
• https://github.com/Microsoft/MixedRealityCompanionKit

Demo Mixed Reality App Development

HoloLens Apps Spatial Mapping （空間認識） Spatial Mapping Renderer / Spatial Mapping Collider Spatial Understanding 床や壁の認識 Sharing & Anchor 空間位置補正

HoloLens Apps の注意点 Design for Mixed Reality https://docs.microsoft.com/en -us/windows/mixed -reality/design

• https://docs.microsoft.com/en-us/windows/mixed-reality/design

Mixed Reality App Design https://docs.microsoft.com/ja -jp/windows/mixed -reality/case-study-expanding-the-design-process-for-mixed-reality

• https://docs.microsoft.com/ja-jp/windows/mixed-reality/case-study-expanding-the-design-process-for-mixed-reality

Motion Controller for Immersive Device

Motion Controller Event from InteractionManager InteractionSourceDetected InteractionSourcePressed InteractionSourceReleased InteractionSourceUpdated InteractionSourceLost

Motion Controller Control from Unity Input Trigger Axis 10(9) Button 15(14) thumbstickPosition thumbstickPressed Axis 5(2) Axis 4(1) Grip Axis 12(11) selectPressed Button 5(4) selectPressedAmount grasped Button 9(8) Menu Button 7(6) menuPressed Axis 20(18) Axis 19(17) Touched Button 19(18) Pressed Button 17(16) touchpaddPosition touchpadTouched touchpadPressed Input.GetButton/GetAxiｓ （カッコ内は左手用） XR.WSA.Input

Windows Mixed Reality Toolkit (MRTK) @ GitHub

Demo Development MR App

Sharing

Sharing

Companion Kit / Spectotor View

まとめ

早く始めて、Outputを続けた人には より良い情報が集まり、よりよい人脈が作られる そこからの情報の練度は加速する 今、始めましょう HoloLens Developer Edition 333,800円 Webでクリックするだけの簡単なお仕事です♪

Mixed Reality 準備できてます 皆さんの参画をお待ちしています。

本書きました！ Windows Mixed Realityアプリ開発入門 Unityで作るVR＆HoloLensアプリケーション 著者：日本マイクロソフト株式会社 高橋 忍 ページ数：456（仮） 価格：（本体3600円＋税）（仮） 発売日：2018年5月31日（木） ISBN：978-4-8222-5376-9 de:code（5/22～23）にて先行発売

Thank you! ご静聴ありがとうございました！