Tokyo HoloLens ミートアップ vol.10 LT資料

1. 趣味全開なアプリ
作ってきました的なヤーツ
（作成中）
Naka@jojomonvr
2018/10/06
1

2. 自己紹介
Naka@jojomonvr
2
Unity歴1年（ Oculus Rift・Go, HoloLens ）
普段はECパッケージ、業務システムの開発・保守など。
HoloLens開発はどこにいったらやらせてもらえるの～。

3. 本日話すこと
• アプリ制作の背景
• Concept
• 機能特徴と紹介
• 終わり
3

4. 最近HoloLensに不足しているものがあるのでは。
4

5. 重量？
5

6. 頭部への締め付け？
6

7. 否
7

8. 今不足しているもの
⇒ そんな重量、頭部への締め付けをものともしない
圧倒的なHoloLensを楽しむ心
8

9. どんなときでも
HoloLensをかけていたくなるアプリ
⇒
絶えず表示していても不快に感じず
むしろ楽しめるもの
9

10. Concept
自分の好きな３Dモデルが
ときには同居人としてときにはコンシェルジュと
して生活の一部に溶け込む
10

11. 機能特徴と紹介
• 同居人を自由に変更
• 自然な移動
• 自然な会話
• 状況に応じたアクション
11

12. 同居人を自由に変更
• VRoid Studio
• Azure Blob Storage
リストに表示する画像とVRoid Studioで作成したモデルを
Azure Blob Storageからダウンロード
12

13. 同居人を自由に変更
Azure Blob Storageからダウンロード
参考
HoloLensで始めるAzure BLOB Storage ～AssetBundleを添えて～
https://qiita.com/morio36/items/d4b595c074d37f5d0f61
13

14. 同居人を自由に変更
VRMをHoloLensに持ってくる
• IL2CPPでビルド⇒はまりそうなのでやめる
HoloLensのアプリ開発でIL2CPP使っていろいろハマった話。
https://neno-garden.com/blog/2018/10/03/hololens_il2cpp/
• 公式の手順に従いUnityに取り込みprefab作成
→VRMフォルダ以下はMToonとResources以外は削除
→AssetBundleにしてBLOB Storageにアップ
14

15. ※モデルの軽量化
1. GameObjectタブ→Export to FBでFBX出力
2. マテリアル再設定
3. 「Simplygon Studios」を利用してポリゴン数を減らす
参考
Simplygon Studios
http://matatabi-ux.hateblo.jp/entry/2017/10/18/100000
15

16. ※モデルの軽量化
16
100%
93586 Triangle
8.0MB
25%
23396 Triangle
5.3MB
10%
9357 Triangle
5.0MB

17. 17
100% 10%

18. 18

19. 自然な移動
• SpatialUnderstanding（MRTK）
• NavMesh
高低差に応じてSpatialUnderstandingとNavMeshを
使い分けて移動
19

20. 自然な移動
高低差のある大きな移動
• MRTKのSpatialUnderstandingで床やオブジェクトの上面を取得して、
移動先としてランダムに移動
高低差の少ない小さな移動
• NavMeshで移動可能な範囲を取得して範囲内で移動先をランダムに取
得して移動
参考
床が落ちるHoloLensアプリ「FloorFalling MR」作成メモ
https://torikasyu.com/?p=966
20

21. 自然な会話
• Bing Speech speech to text（Azure）
• Language Understanding（Azure）
音声を文字に変換→言語解析であいまいな表現を可能にする
Azureを利用したHoloLensでの日本語音声入力
http://www.hiromukato.com/entry/2018/05/02/172356
LUISによる自然言語認識
http://www.hiromukato.com/entry/2018/05/05/231857
最近speech to text で500エラーが返ってくる頻度が高いのだが原因思い当たることがある
方いたら教えてください。。。
21

22. 状況に応じたアクション
• Azure Custom Vision Object Detection
HoloLensで撮った写真を元に何がどこにあるかを検出
→定期的に走らせて検出した内容に応じた処理、
アニメーションを実行
参考
Mr and Azure 310: Object detection
https://docs.microsoft.com/en-us/windows/mixed-reality/mr-azure-310
22

23. 状況に応じたアクション
23

24. 状況に応じたアクション
24

25. やき弁
⇒ 北海道
⇒ ・・・
25

26. やきべん ⇒北海道 ⇒
札幌HoloLensミートアップvol.3 秋編
10月27日（土）開催！！
26

27. 2018/4/14 HoloMagicians / xMCN
■イベント名：
札幌 HoloLens MeetUp Vol.3 ~秋編~
日程：2018年10月27日（土）
時間：14:00～19:00（13:30開場）
会場：未定
主催：HoloMagicians / DoMCN / TMCN
https://hololens.connpass.com/event/102311/ 27
次回イベント！

28. １０月の北海道！！
28

29. 層雲峡の紅葉 & 温泉
29

30. 旬のイクラ
30
https://youtu.be/V4dM_jXe-8g
なごやか亭 こぼれいくら

31. バニラエア（成田 ⇒ 新千歳）
31

32. バニラエア（新千歳 ⇒ 成田）
32
北海道ふっこう割もうまくご活用ください！

33. 札幌でお待ちしております！
33

34. 以上
ご清聴
ありがとうございました
34