第4回LookingGlass勉強会の資料です。

1. Looking Glassで
実写コンテンツ

2. はじめに
• 今回の発表はほとんどShawnが書いたブログ記事「The Memory
Machines」の翻訳になります。
• https://blog.lookingglassfactory.com/announcements/the-memory-
machines/
2020 will be remembered as the year that volumetric & light field
recording technologies became deeply integrated with holographic
displays. This combination will redefine how we relive our memories
and connect with one another for decades to come. (上記ブログより引用)

3. Looking Glass用の実写コンテン
ツの４つの主要アプローチ
忠
実
さ
手軽さ
https://blog.lookingglassfactory.com/announcements/the-memory-machines/

4. Looking Glass用の実写コンテン
ツの４つの主要アプローチ
• Large-scale Volumetric Capture Studios
• Portable/Modular Depth Camera Capture
• Light Field Capture
• Depth from Phones

5. Large-scale Volumetric Capture
Studios
Intel Studios, Microsoft Mixed Reality Capture Studios等の大規
模なスタジオで数十、数百のカメラで撮影した映像をサーバーで統合し、
3Dモデルを構築する手法
• 長所：
コンテンツとしては3Dモデルなので、VRやARなどの様々なプラットフォーム
で利用可能
• 短所：
コストが高いことと髪の毛等の忠実な再現や光沢、反射の光学的な再現が難し
い
• コンテンツ作成方法：
専用の撮影スタジオ。日本だとクレッセントさんのスタジオとか
• LookingGlass用のViewer ：
専用のアプリはなし。Unityのシーンに取り込んで再生する。
LookingGlassFactory社より提供

6. Portable/Modular Depth
Camera Capture
Azure kinnect等の比較的低コストかつ高性能な深度センサーでデプス
付きの画像、動画を作成する手法
• 長所：
コストとクオリティのバランスがよい。
• 短所：
Large-scale Volumetric Capture Studiosと同様に髪の毛等の忠実な再現
や光沢、反射の光学的な再現が難しい
• コンテンツ作成方法：
Depthkit + Azure Kinnect等のデプスカメラ
• LookingGlass用のViewer ：
Depth Media Player

7. Light Field Capture
複数台のカメラによる同期撮影や、時分割撮影によって被写体を複数の
視点の画像として撮影する手法
• 長所：
４つの手法の中で最も忠実に被写体を再現できる
• 短所：
市販品がないので簡単に撮影できない
• コンテンツ作成方法：
多視点撮影治具 例：今江科学さんの実写静止画多視点撮影治具
• LookingGlass用のViewer ：
Lightfield Photo App
Light field video player(beta)(未確認)
キルロボさんのLookingGlassQuiltViewer

8. iPhone 7 Plus, 8 Plus, X, 11, Pixel 4 等の2眼以上のカメラを持つス
マートフォンでデプス付きの写真を撮影する手法
• 長所：
最も手軽。デバイスが普及している
• 短所：
他の３つの手法に比べるとクオリティは低くなる
• コンテンツ作成方法：
デプス付きの写真が撮影できるスマホ、カメラ + Moments 3D or ステレオ
フォトメイカー
• LookingGlass用のViewer：
Depth Media Player
ステレオフォトメイカー
Depth from Phones

9. 本題：本日の展示コンテンツ

10. ４つのうち、２つもある！
いいiPhoneがあればもう一個！

11. 2020年は
holographic memories元年！
実写コンテンツの時代が来た！？

12. • ステレオフォトメーカーとLooking Glass @spmaker
http://stereo.jpn.org/lkg/lkgandspm.pdf
• Looking Glass + YouTubeLiveでグラスレス3D生中継をやってみよ
う！(できるのか？) @_mer2
• VR180動画をLookingGlassで裸眼立体視する @nkjzm
https://speakerdeck.com/nkjzm/stereoscopic-vr-180-video-with-naked-eye-
with-the-looking-glass
• Kandao Qoocamのステレオ写真をLooking Glassに表示してみた
@decchi
https://www.slideshare.net/MasahiroIde/kandao-qoocamlooking-
glass?ref=https://connpass.com/event/124916/presentation/
References