ホログラムデベロッパーカンファレンス 2019 LT登壇資料

1. takabrz1 大阪駆動開発 Takahiro Miyaura
だんグラで「Mixed Reality Toolkit V2」の
サンプルを動かしてみた。

2. 宮浦 恭弘 (Miyaura Takahiro)
 大阪駆動開発コミュニティに生息
 HoloLens日本販売してからXR系技術に取組む
 HoloLens系技術Tipsを公開し続けた結果、よく知っている人扱いを受ける。
 Mixed Reality Toolkit(以降MRTK)のTipsが比較的多めで、普段(?)からよく
(?)MRTKの調査などを行っているうちにMRTKに詳しい人扱いを受ける。
 HoloLensを中心にXR系技術と相性のいい技術（機械学習、IOT)を組合せ
て日々遊びの中で知見を蓄えています。
技術Tips : https://qiita.com/miyaura
takabrz1 ※よかったらこれを機にお知り合いになってください
Microsoft MVP for Windows Development 2018-2020
某会社でSE(アプリケーション領域のアーキテクト的なお仕事なはず）＝ XRは趣味です
（貢献領域：Mixed Reality）

3. 本日のテーマ
だんグラSDKもいいんですが、他に
使えるライブラリがないかも探してみた話
意外とMixed Reality Toolkit V2もいけるかもしれない
2019/10/19 Copyright © 2019 Takahiro Miyaura
Microsoft社が提供するXRデバイス（HoloLens等）用ライブラリ
https://github.com/microsoft/mixedrealitytoolkit-unity/

4. Mixed Reality Toolkit V2を動かす
開発環境
2019/10/19 Copyright © 2019 Takahiro Miyaura
Unity 2018.4.6f1
ライブラリ
arcore-unity-sdk-1.7.0.unitypackage
Microsoft.MixedReality.Toolkit.Unity.Examples.2.0.0.unitypackage
Microsoft.MixedReality.Toolkit.Unity.Extensions.2.0.0.unitypackage
Microsoft.MixedReality.Toolkit.Unity.Foundation.2.0.0.unitypackage
Microsoft.MixedReality.Toolkit.Unity.Tools.2.0.0.unitypackage
開発環境

5. Mixed Reality Toolkit V2を動かす
セットアップ
2019/10/19 Copyright © 2019 Takahiro Miyaura
以下のライブラリをすべてインポート
arcore-unity-sdk-1.7.0.unitypackage
Microsoft.MixedReality.Toolkit.Unity.Examples.2.0.0.unitypackage
Microsoft.MixedReality.Toolkit.Unity.Extensions.2.0.0.unitypackage
Microsoft.MixedReality.Toolkit.Unity.Foundation.2.0.0.unitypackage
Microsoft.MixedReality.Toolkit.Unity.Tools.2.0.0.unitypackage
以下のサンプルSceneをロード
HandInteractionExamples.unity
Unityを起動し新しい3Dプロジェクト作成&インポート

6. Mixed Reality Toolkit V2を動かす
サンプルの修正 ～カメラ周り～
2019/10/19 Copyright © 2019 Takahiro Miyaura
 [Main Camera]と同階層に[ARCore Device]を
セット
 [ARCore Device]をUnPack
 [First Person Camera]から[Main Camera]に
[Tracked Pose Driver]移動
 【参考】設定は以下の通りに！
 Device : Generic XR Device
 Pose Source : Color Camera
 Tracking Type : Rotation And Position
 Update Type : Before Render
 Use Relative Transform : チェック
 Use Pose Provider : None
 [First Person Camera]を削除
MRTK V2標準のカメラをARCore対応にする

7. Mixed Reality Toolkit V2を動かす
サンプルの修正 ～イベント周り～
2019/10/19 Copyright © 2019 Takahiro Miyaura
 サンプルのボタン等のコンポーネントに
[Pointer Handler]を追加
 [OnPointerDown]に以下の関数を設定
 PhysicalPressEventRouter.OnHandPressTouched
 [OnPointerUp]に以下の関数を設定
 PhysicalPressEventRouter.OnHandPressUnTouched
 [OnPointerClicked]に以下の関数を設定
 PhysicalPressEventRouter.OnHandPressTriggered
タップでイベント追加(Pointer Handler)

8. Mixed Reality Toolkit V2を動かす
ライブラリの修正 ～イベントのだんグラ最適化～
2019/10/19 Copyright © 2019 Takahiro Miyaura
UnityTouchDeviceManagerの修正
Updateメソッドを書換え
public override void Update() {
int touchCount = UInput.touchCount;
for (var i = 0; i < touchCount; i++) {
Touch touch = UInput.touches[i];
switch (touch.phase) {
case TouchPhase.Ended:
InputSystem.RaisePointerClicked(InputSystem.GazeProvider.GazePointer,
InputSystemProfile.InputActionsProfile.InputActions[0], 1,
Handedness.None);
break;
}
}
}

9. Mixed Reality Toolkit V2を動かす
Player Settingsの修正 ～だんグラMR設定～
2019/10/19 Copyright © 2019 Takahiro Miyaura
 [Android]の[XR Settings]を開く
 [Virtual Reality Supported]にチェック
 [Virtual Reality SDKs]に[Cardcoard]を追加
 [ARCore Supported]にチェック
だんグラ用にMR設定で出力する

10. まとめ
2019/10/19 Copyright © 2019 Takahiro Miyaura
だんグラSDKもいいんですが、他に
使えるライブラリがないかも探してみた話
意外とMixed Reality Toolkit V2もいけるかもしれない
MRTK V2なら他デバイス（Oculus, HoloLens…)と共通化可能
だんグラの可能性をもっと広げていきましょう！

11. 大阪駆動開発
関西を中心に、IT系のおもしろそうなことを楽しんでやるコミュニティ
2019/10/19 Copyright © 2019 Takahiro Miyaura