XRMTG2018/04で話した内容

1. HoloLens RS4アップデート
について

2. 自己紹介
山地 直彰
XRを中心に関西とかで活動してる関西のHoloLensの人
最近はHoloLens×UE4での開発もしてる

3. ・HoloLensの人として声をかけられる
・待ちきれずRS4アップデートをしてしまう
・懇親会だけで600人規模のイベントに行って1人だけHoloLensで目立つ
・ジェダイチャレンジを体験
だいたいRS4アップデート関連で遊んでたケド、ここに書くと本題の内容と被る
ので割愛
最近やったホロ活

4. XRについて
主にAR/MR/VR等の総称として使用
広義的にはAR/MR/VR等のUXを支える技術等も含む？
略さずいうとXR(クロスリアリティ)のイメージ

5. XRミーティング(このイベント)について
・月1ぐらいでXRに関する情報交換、情報共有
・HoloLens体験やHoloアプリのお披露目、空間共有等実機を試せる
・XRと絡んでればわりと何でもあり
・XRについて興味がある人同士で交流
・発表等もゆるい感じ

6. ・HoloLensがRS4アップデートによりできることが増える
・MagicLeapの情報が一気にアクセスできるように
・IoTビジネス共創ラボ xR(VR/AR/MR) WG 勉強会が始動
・HoloLensで動体視力チャレンジ
・LeapMotionのARヘッドセット発表
・HTC Vive Pro、Spatial Mapping的なことできるらしい
・HoloLens2に関する噂レベルのあれこれ
・HoloLensソリューション、陸海空制覇
・HoloLens販売パートナー企業がでてくる
最近のHolo話題

7. ここから本題

8. HoloLens RS4アップデートについて
HoloLens RS4アップデート関連で試したこと色々共有
ただ丁度前日に東京でRS4アップデートのイベントあったので、内容は大体かぶ
ってる

9. できるようになったこと/かわったこと
・アプリが自動配置される
・2Dアプリのウィンドウサイズ比率を変更できるように
・ExplorerからMTPでHoloLens内のファイルにアクセス可能に
・物理ボタンから動画の撮影が可能に
・デフォルトで両手ジェスチャー操作対応
・Research modeでRGBカメラ以外のセンサーアクセス可能
・自作3Dアイコンが使用可能(OSバージョンアップデートの影響)
・WindowsMLが動作(OSバージョンアップデートの影響)

10. アプリが自動配置される
アプリ一覧からアプリを選ぶとその場所に配置されるようになった
(置く手順は減ったものの、目の前が散らかりやすくなる)

11. ウィンドウサイズ比率を変更できるように
2Dアプリのウィンドウの比率を変更して、縦長、横長等自由に調整できるように
(UWPのウィンドウサイズ決まってないのがようやくHoloLensでも活きる)

12. MTPでHoloLens内のファイルにアクセス可能
画像等もOneDrive等を経由せずともすぐ送受信できるようになった

13. 物理ボタンから動画の撮影が可能に
音量調整ボタン2つ同時押しの写真撮影だけじゃなく、長押し(3秒)で録画できる
ようになった

14. 両手ジェスチャー操作
ウィンドウ等オブジェクトの拡縮や回転を両手ジェスチャーで行えるようになっ
た
デモ(の説明)がめっちゃしやすくなった

15. RGBカメラ以外のセンサーアクセス
・短距離Depthセンサー
・長距離Depthセンサー
・短距離赤外線センサー
・長距離赤外線センサー
・環境理解カメラ4つ(左外側、左内側、右内側、右外側)
Research modeを有効にすると、上記各種センサーデータ全てにアクセス可能
Research modeを有効にするとアクセスできるカメラ/センサー情報が変わって、
プログラムを直さないとRGBカメラにアクセスできなくなる可能性有
ただResearch modeはバッテリーの消費が早くなる

16. RGBカメラ以外のセンサーアクセス

17. 自作3Dアイコン
OSがアップデートされ、Immersiveデバイスでは以前からできていた自作の3Dア
イコンの利用が可能になる
やり方はここがわかりやすい
https://twitter.com/diberidarshi/status/979367045954338816

18. WindowsML
OSアップデートにより、WindowsMLが利用可能に
(学習済みのonnx形式データをUWP上で利用できる)
センサー類のアクセスの件もあるので、CV系で合わせて使うと面白そう
TinyYOLOとかもHoloLens上で実行できる(1FPSもでないのでカクカク)

19. WindowsML

20. その他の細かな話
ウチのHoloLens、RoboRaidが3Dアイコンじゃなくなってる？

21. その他の細かな話
SpatialMappingが高速化＆精度向上
比較していないので感覚的なところだが、他にも同じことを思っている人はいる
ので、よくなってるっぽい

22. その他の細かな話
Edgeから再生されるサウンド等も3Dサウンド化
作業用BGM再生とか動画の視聴とは相性悪そうなので、任意でオフにできる機能
欲しい

23. その他の細かな話
デバイスポータルもOSバージョンに合わせて色々更新(Immersiveのやつに近い)

24. その他の細かな話
RS4アップデート適用後でもUE4で作ったアプリも動いた

25. RS4アップデート関連の情報とか
http://blog.hololab.co.jp/entry/2018/03/28/025947
http://www.tattichan.work/entry/2018/03/30/HoloLens_RS4_%E3%81%AF%E3%8
2%B9%E3%82%B4%E3%82%A4%E3%83%A4%E3%83%84
http://akihiro-document.azurewebsites.net/categories/hololens/
https://hololens.connpass.com/event/83943/presentation/

26. 告知

27. コミュニティ関連告知
【Osaka HoloLens ミートアップ vol.4】
日時：5/12(土)17:00～
場所：スタートアップカフェ大阪
【XRJAM】
日時：6/2(土)ー6/3(日)
場所：ソフト産業プラザ・イメディオ
【メイカーズバザールVol.5出展予定】

29. 以上