HoloLens / Windows MR開発入門

HoloLens / Windows MR
開発入門
初音玲（Microsoft MVP for Windows Development）
#sendaiitfes #s292033

仙台IT文化祭を支えてくださっている
スポンサー様／後援コミュニティのご紹介
仙台IT文化祭2017 http://2017.sendaiitfes.org/ #sendaiitfes #s292033 12017/10/29

プラチナスポンサー
ゴールドスポンサー

Tシャツスポンサー
シルバースポンサー

スタンプラリースポンサー
ロゴスポンサー

グッズスポンサー
メディアスポンサー

個人/団体スポンサー
オフィシャルコミュニティ

セッション中の撮影および録音はOKです！
仙台IT文化祭2017 http://2017.sendaiitfes.org/ #sendaiitfes #s292033 8
撮影可録音可
シャッター音がしないHoloLensで撮影ください
他のカメラの場合はシャッター音にご配慮ください
2017/10/29

皆さまからの質問を募集しています！
以下のハッシュタグを使って、ツイートしてください！
#sendaiitfes #s292033
※「s292033」がこのセッションを表します。
セッション中、いただいた質問へお答えいたします
2017/10/29

皆さまへのご案内

皆さまへのご案内
この後『Ask the Speaker / ITなんでも相談室』
212会場にしばらくいます
ご質問やご相談、キーワード
などでわからないことや、
もっと聞きたいことが
ありましたら、お気軽に
お越しください！
アンケート回答へのご協力を
よろしくお願いいたします！
■文科系総合講義棟(C19)1F ■文科系総合講義棟(C19)2F
Ask the Speaker / ITなんでも相談室
2017/10/29

自己紹介
初音玲
兼業開発者（ICT x IT）
仕事略歴
大手SIerで音声認識使ったシステムつくってます
株式会社ホロラボつくりました
Community活動
Microsoft MVP (2008/04～2018/06)
TMCNテクニカルエバンジェリスト
HoloMagitions
132017/10/29仙台IT文化祭2017 http://2017.sendaiitfes.org/ #sendaiitfes #s292033

アジェンダ
MR (Mixed Reality) って聞いたことありますか？
MRアプリ大変ですか？いま何がつくれますか？
Rの境界
まとめ

MR (Mixed Reality) って聞いたことありますか？
HoloLensと
Windows MR immersive Headset

MR(Mixed Reality)とは

３つの相互作用の次の進化
人
環境Computer
18
HCI 現実
認識
MR

MR (Mixed Reality) とは
MR = 複合現実感
現実
HCI
各種センサーによる環境認識
MR = 複合現実感
19https://en.wikipedia.org/wiki/Mixed_reality 2017/10/29仙台IT文化祭2017 http://2017.sendaiitfes.org/ #sendaiitfes #s292033

HoloLens

たくさんのセンサー

シースルー

WinMR“イマーシブ” Headset
シースルーじゃない

シースルーじゃない

シースルーじゃない
2017/10/29仙台IT文化祭2017 http://2017.sendaiitfes.org/ #sendaiitfes #s292033 25

26
じゃあ、これはなに？

でも、
Windows MRは
すごいんです！

配信プラットフォーム
SteamVR対応

Oculus Rift
HTC Vive

SteamVRにある
Oculus Rift
HTC Vive
どうやら動くようですよ

MRアプリ大変ですか？
いま何がつくれますか？

Mixed Realityアプリ
HoloLensも
Windows MR イマーシブ Headsetも
32
Microsoft HoloLens / Win MR
Windows 10
Windows Runtime (UWP)
UnityEngine
Mixed Reality アプリ
Windows PC
Windows 10
Visual Studio
Unity
C#
動作環境開発環境

HoloLens
Win10 Build 14393.1770.x86fre.rs1_release.170917-1700
CPU+GPU+メモリ+ディスプレイ+バッテリー
無線LAN+Bluetooth
OS
各種センサー (GPSは含まれない)iPhone X 256GB 2.6台分というお値打ち価格

開発ツール (2017/10/28現在)
HoloLens開発
OS Windows 10 x64 Build 14393 以上
IDE Visual Studio 2017 15.4.1
• Windows 10 SDK 10.0.14393以下
Emulator HoloLens Emulator build
10.0.14393.1358
Unity Unity 2017.1.2
Toolkit MixedRealityToolkit-Unity
v1.2017.2.0
AR拡張 Vuforia 6.1 342017/10/29仙台IT文化祭2017 http://2017.sendaiitfes.org/ #sendaiitfes #s292033

Acer AH101
Win10 Build 16299以上 (Fall Creators Update)
コントローラー
ジャイロ+加速度計+磁力計+近接
ディスプレイ
別途、PCが必要

開発ツール (2017/10/28現在)
WinMR開発
OS Windows 10 x64 Build 16299 以上
IDE Visual Studio 2017 15.4.1
• Windows 10 SDK 10.0.16299以上
Emulator -
Unity Unity 2017.2.0f3 MRTP
Toolkit MixedRealityToolkit-Unity
v1.Dev.2017.2.1
AR拡張 Vuforia 6.1

HoloLensアプリを作ってみよう

Unityを起動して新規プロジェクト作成
Unity 2017.1.2

HoloToolkit v1.2017.2.0をインポート
Config三銃士で必要な設定を実施

Enable XRだとこうなる

Enable XR = Windows MR SDK!
[+]押して、Windows Holographicを追加しよう

空間認識機能をつける
[SpatialMapping]-[Prefabs]-[SpatialMapping]

空間に箱を設定
[3DObject]-[Cube]
プロパティ値
Position 0, 0, 2
Scale 0.2, 0.2, 0.2

タップすると箱に重力を設定(1)
[Assets]フォルダで[Create]-[Folder]メニュー選択
フォルダ名をScripts

[Scripts]フォルダで[Create]-[C#Script]メニュー選択
ファイル名を「AirTapGuesture」

ファイル名をダブルクリックしてVisual Studio起動

ファイル名をダブルクリックしてVisual Studio起動
public void OnInputClicked(InputClickedEventData eventData)
{
var trans = transform;
Instantiate(gameObject, trans.position, trans.rotation);
gameObject.AddComponent<Rigidbody>();
}
IInputClickHandlerを追加する

Visual Studioでビルドして実機デプロイ

Visual Studioのプロジェクトを書き出す

Visual Studioでビルドとデプロイ

デモ！
キューブをタップすると
増殖して
重力にひかれて落ちて
現実の床でとまる

Unity 2017.2では？
Unity 2017.2.0f3 MRTP + MRTK v1.2017.2.1 (preview)
コンパイルエラーとなる

Windows MR Immersive アプリを作ってみよう

Unity 2017.1.2 + MRTK v1.2017.2.0
HoloLensとの変更点
Target Occluded Deviceにチェック→外れてしまう
Windows 10 SDKを10.0.16299.0
Virtual Reality SDKをWindows Mixed Reality
実行結果
実行はできるが真っ白な画面が表示される

Unity 2017.2.0.f3 MRTP + MRTK v1.2017.2.1 (preview)
HoloLensとの変更点
Target Occluded Deviceにチェック→チェックできた
Windows 10 SDKを10.0.16299.0
Virtual Reality SDKをWindows Mixed Reality
実行結果

MRアプリ大変ですか？
いま何がつくれますか？

事例 - Skype
59
https://www.microsoft.com/microsoft-hololens/ja-jp/hololens-commercial

事例 – ボルボ
60
https://www.microsoft.com/microsoft-hololens/ja-jp/hololens-commercial

事例 – 小柳建設
61
https://www.youtube.com/watch?v=dW1amJLDwuQ

AR CAD CLOUDサービス構成
①
CADデータを
アップロード
③
AR/VRデバイス
にダウンロード
CADソフト/ブラウザ
※対応フォーマット：
IGES/STEP/STL
②
クラウド上で
自動最適化処理
62
HoloLab Inc. Confidential

HoloLens + Cognitive Serviceの例
視覚
 Computer Vision API
 Face API
 Emotion API
音声/言語
 Bing Speech API
 Translator Speech API
検索
 Bing Image Search API
 Bing Web Search API
 Bing News Search API

WinMRのロードマップ予想
2016年秋～
HoloLens
2017年秋～
Windows MR
2018年秋～
ARとVRの統合
（シン・MR）
64
.NET Core / .NET Standard

FIN

HoloLens / Windows MR開発入門

Recommended

Recommended

More Related Content

What's hot

What's hot (20)

Viewers also liked

Viewers also liked (7)

Similar to HoloLens / Windows MR開発入門

Similar to HoloLens / Windows MR開発入門 (20)

Recently uploaded

Recently uploaded (8)