Copyright © LivingStyle, Inc. All Rights Reserved.
ABC2016 Autumn
Tangoが切り開くMRの世界と
日本における最新開発事例
2016年11月19日
株式会社リビングスタイル
園田一磨
Copyright © LivingStyle, Inc. All Rights Reserved.
自己紹介
園田一磨(そのだかずま) 1969年生まれ
東京生まれ、東京育ち、長野県在住(11年目)
Copyright © LivingStyle, Inc. All Rights Reserved.
−上智大学理工学部卒
−OA機器メーカにてSA/SD,OOA/OODによる組込開発
−ドットコムベンチャーにてWebアプリケーション開発
−国内ベンチャーにてDRM(デジタル著作権管理)システム開発
−SIer立上げ〜受託システム開発
−株式会社リビングスタイル取締役/CTO
会社概要
Copyright © LivingStyle, Inc. All Rights Reserved.
会社名 株式会社リビングスタイル
本 社 東京都新宿区山吹町333
設立日 2007年10月
従業員数 26名(2016年11月現在)
資本金 23,500万円(資本準備金含む)
主要株主
井上俊宏
グローバル・ブレイン株式会社
アコード・ベンチャーズ株式会社
株式会社電通デジタル・ホールディングス
三菱UFJキャピタル株式会社
株式会社ビジネス・ブレークスルー
主要プロダクト・サービス
Copyright © LivingStyle, Inc. All Rights Reserved.
<インテリア業界向け>
Web3Dシミュレーター
iPadアプリケーション
• 直感的・シンプルな操作方法で、誰でも
簡単・短時間に高度なコーディネートを
作成可能
• クラウドベースのサービスで、通信環境
さえあれば、いつでもどこでもコーディ
ネートの作成・再生・修正・共有が可能
• 間取り図面取込み、ショッピングカート
連携、オンラインコーディネート共有
など、豊富な機能がインテリアショップ
のビジネスをサポート
• AR(拡張現実)技術を利用し、実際の
お部屋に好みのインテリアを仮想的に
配置
• インテリア・ブランド横断のコーディ
ネートを指一本で実現
• 張り地の変更や、商品名・価格・サイズ
などの詳細情報の表示にも対応
• ECサイトと連携し「そのまま購入」を
実現
<Consumer向け>
ARインテリアアプリ
RoomCo(ルムコ)
強み
Copyright © LivingStyle, Inc. All Rights Reserved.
• 100万点を超える日本最大のインテリアDB
• 常時最新の商品データが製作・登録されるエコシステム
3D商品データベース
• ブラウザ/タブレット/スマホ上で動作する3D/AR技術
• 間取り図面連携や、VR/AR等業界に特化した開発力
(特許申請中)
テクノロジー
• 商品の3D化/販売コンサルまでワンストップサービス
• 20を超えるブランドとの連携
業界へのコミットメント
• 商品の3D化/販売コンサルまでワンストップサービス
• 20を超えるブランドとの連携
業界へのコミットメント
採用実績
Copyright © LivingStyle, Inc. All Rights Reserved.
24ブランド
ー採用ブランドー
100万点
ー登録済みの商品データー
80%
ー3Dシミュレータ利用時の成約率ー
メディア掲載実績
Copyright © LivingStyle, Inc. All Rights Reserved.
2016/7/12
2016/7/1
2016/7/25
2016/7/18
2016/9/1
VR元年 ?
 VR (Virtual Reality) 技術自体は古くから存在
 ハードウェアデバイス(GPU,有機ELディスプレイなど)の進化
 トラッキングセンサー(位置、視線、ハンド)技術の向上
 HMDの普及
 ディスプレイ型
 Oculus Rift, HTC Vive, Sony PlayStationVR, FOVE
 スマホ装着型
 Samsung Gear VR, Google CardBoard/Daydream , ハコスコ
 プロセッサ内蔵型
 Microsoft Hololens, Intel Projcet Alloy, Qualcom Snapdragon VR820
 開発環境(Unity, Unreal Engineなど)の進化
 AR (Argumented Reality) / MR (Mixed Reality, Merged Reality)
Copyright © LivingStyle, Inc. All Rights Reserved.
What's VR ?
 Virtual Reality:仮想現実
 コンピュータによって作り出された仮想空間
 3DCGや全天球カメラによる映像を投影する
 昨今では、とりわけHMDによる立体視をサポートし、没入感
の高い物を指す場合が多い
 テクノロジー
 ハンドトラッキング、位置トラッキング、視線トラッキング
Copyright © LivingStyle, Inc. All Rights Reserved.
弊社サービス:VR
Copyright © LivingStyle, Inc. All Rights Reserved.
各社インテリアシミュレータ(Web, iPad)
Oculus DK2 / ハコスコ対応
リノベる。おうちプランナー(Android, iOS, Windows)
What’s AR ?
 Argumented Reality:拡張現実
 現実世界の空間に対して、コンピュータによって作り出された
モノ(3DCG)を合成
 テクノロジー
 マーカー認識 (床に置いたマーカーにより床面、サイズを認識)
 SLAM (Simultaneous Localization And Mapping) 技術により距離、サイズを
推測
 Extended Tracking (マーカーからカメラが外れた際のトラッキング)
Copyright © LivingStyle, Inc. All Rights Reserved.
弊社サービス:AR
Copyright © LivingStyle, Inc. All Rights Reserved.
商品詳細 カラー変更 EC連携
ブランド、価格、サイズなどの
商品詳細を一目で確認
ECサイトと連携し、気に入った
商品を即購入が可能
実際のお部屋にインテリアを配置、色替え、移動などをリアルタイムで実現
RoomCo(ルムコ) (Android, iOS)
What’s MR ?
 Mixed Reality, Merged Reality:複合現実
 現実世界のモノと仮想空間のモノとが相互に作用する
 HMDによる ”マーカーレスAR+立体視” をさすケースが多い
 テクノロジ
 デプスセンサ、位置トラッキング、ハンドトラッキング、オク
ルージョン
 フレームワーク
 Google Tango
Copyright © LivingStyle, Inc. All Rights Reserved.
What’s Google Tango ?
Copyright © LivingStyle, Inc. All Rights Reserved.
3つのコアテクノロジー
Motion Tracking Area Learning Depth Perception
つまり、これらのコアテクノロジーにより、
空間をスキャンし点群データからメッシュを作ることが出来る!
Tangoではこれを“3D Reconstruction”と呼んでいる。
世界初のTango対応ファブレット!
ARアプリのTango対応
 ”IDC大塚家具 ARアプリ”のTango対応
 “空間のスキャン”→”点群データ取得”→”メッシュ生成”
ができれば、これまでのARに対して以下が可能になる
はず!
 マーカーレスで実寸で3Dオブジェクトを配置
 壁面や天井面への3Dオブジェクト配置(壁掛け時計,照明)
 物体(メッシュ)への衝突検知
 現実世界のモノと、仮想空間のモノとのオクルージョン表現
 開発環境は”Unity” + “Tango Unity SDK”を使用
Copyright © LivingStyle, Inc. All Rights Reserved.
弊社サービス:MR
Copyright © LivingStyle, Inc. All Rights Reserved.
”Lenovo Phab2 Pro.”で、マーカーレス/衝突検知/オクルージョンを実現!
IDC AR for Tango(Android)
Tips:動的なメッシュの生成
Copyright © LivingStyle, Inc. All Rights Reserved.
 TangoManagerで”3D Reconstrction”をONにして、 TangoSDKに付属
の”TangoDynamicMesh”サンプルスクリプトで動的にメッシュを生成できるようにす
る
Mesh Collider を追加し、
衝突を検出できるように
しておく
Motion Tracking と
Enable Depth も ON
Motion Tracking と
Enable Depth も ON
Tips:家具のGameObject設定
Copyright © LivingStyle, Inc. All Rights Reserved.
 家具のGameObjectはRigidBodyにし物理特性を与える
 Colliderを設定してメッシュとの衝突検知をできるようにする
Is Trigger はOFF
Is Kinematic はOFF
Tips:オクルージョン設定
Copyright © LivingStyle, Inc. All Rights Reserved.
 オクルージョンはTango AR Cameraの”Enable Occlusion”をON
Update Points MeshがON
になっている必要がある
Tips:その他
 通常のARエンジンとはワールド原点が違う
 PTC Vuforiaではマーカー位置がワールドの原点
 Tangoではカメラ位置がワールドの原点
 赤外線TOFで距離を計測しているため
 白熱電球など赤外線を多く含む照明下でのスキャンは苦手
 Googleは ”屋内空間での使用” としている
 スキャン距離は4m
 光沢等の反射物、真っ黒の物体のスキャンは苦手
 メッシュに穴が空く
Copyright © LivingStyle, Inc. All Rights Reserved.
アプリケーション例:人物の点群データ化
Copyright © LivingStyle, Inc. All Rights Reserved.
アプリケーション例:空間のメッシュ化
Copyright © LivingStyle, Inc. All Rights Reserved.
質疑応答
Copyright © LivingStyle, Inc. All Rights Reserved.
ご質問承ります!
さいごに
Unityエンジニア募集中!
recruit@livingstyle.co.jp までよろしくお願いします!
Copyright © LivingStyle, Inc. All Rights Reserved.
ご清聴ありがとうございました!

Tango開発事例

  • 1.
    Copyright © LivingStyle,Inc. All Rights Reserved. ABC2016 Autumn Tangoが切り開くMRの世界と 日本における最新開発事例 2016年11月19日 株式会社リビングスタイル 園田一磨 Copyright © LivingStyle, Inc. All Rights Reserved.
  • 2.
    自己紹介 園田一磨(そのだかずま) 1969年生まれ 東京生まれ、東京育ち、長野県在住(11年目) Copyright ©LivingStyle, Inc. All Rights Reserved. −上智大学理工学部卒 −OA機器メーカにてSA/SD,OOA/OODによる組込開発 −ドットコムベンチャーにてWebアプリケーション開発 −国内ベンチャーにてDRM(デジタル著作権管理)システム開発 −SIer立上げ〜受託システム開発 −株式会社リビングスタイル取締役/CTO
  • 3.
    会社概要 Copyright © LivingStyle,Inc. All Rights Reserved. 会社名 株式会社リビングスタイル 本 社 東京都新宿区山吹町333 設立日 2007年10月 従業員数 26名(2016年11月現在) 資本金 23,500万円(資本準備金含む) 主要株主 井上俊宏 グローバル・ブレイン株式会社 アコード・ベンチャーズ株式会社 株式会社電通デジタル・ホールディングス 三菱UFJキャピタル株式会社 株式会社ビジネス・ブレークスルー
  • 4.
    主要プロダクト・サービス Copyright © LivingStyle,Inc. All Rights Reserved. <インテリア業界向け> Web3Dシミュレーター iPadアプリケーション • 直感的・シンプルな操作方法で、誰でも 簡単・短時間に高度なコーディネートを 作成可能 • クラウドベースのサービスで、通信環境 さえあれば、いつでもどこでもコーディ ネートの作成・再生・修正・共有が可能 • 間取り図面取込み、ショッピングカート 連携、オンラインコーディネート共有 など、豊富な機能がインテリアショップ のビジネスをサポート • AR(拡張現実)技術を利用し、実際の お部屋に好みのインテリアを仮想的に 配置 • インテリア・ブランド横断のコーディ ネートを指一本で実現 • 張り地の変更や、商品名・価格・サイズ などの詳細情報の表示にも対応 • ECサイトと連携し「そのまま購入」を 実現 <Consumer向け> ARインテリアアプリ RoomCo(ルムコ)
  • 5.
    強み Copyright © LivingStyle,Inc. All Rights Reserved. • 100万点を超える日本最大のインテリアDB • 常時最新の商品データが製作・登録されるエコシステム 3D商品データベース • ブラウザ/タブレット/スマホ上で動作する3D/AR技術 • 間取り図面連携や、VR/AR等業界に特化した開発力 (特許申請中) テクノロジー • 商品の3D化/販売コンサルまでワンストップサービス • 20を超えるブランドとの連携 業界へのコミットメント • 商品の3D化/販売コンサルまでワンストップサービス • 20を超えるブランドとの連携 業界へのコミットメント
  • 6.
    採用実績 Copyright © LivingStyle,Inc. All Rights Reserved. 24ブランド ー採用ブランドー 100万点 ー登録済みの商品データー 80% ー3Dシミュレータ利用時の成約率ー
  • 7.
    メディア掲載実績 Copyright © LivingStyle,Inc. All Rights Reserved. 2016/7/12 2016/7/1 2016/7/25 2016/7/18 2016/9/1
  • 8.
    VR元年 ?  VR(Virtual Reality) 技術自体は古くから存在  ハードウェアデバイス(GPU,有機ELディスプレイなど)の進化  トラッキングセンサー(位置、視線、ハンド)技術の向上  HMDの普及  ディスプレイ型  Oculus Rift, HTC Vive, Sony PlayStationVR, FOVE  スマホ装着型  Samsung Gear VR, Google CardBoard/Daydream , ハコスコ  プロセッサ内蔵型  Microsoft Hololens, Intel Projcet Alloy, Qualcom Snapdragon VR820  開発環境(Unity, Unreal Engineなど)の進化  AR (Argumented Reality) / MR (Mixed Reality, Merged Reality) Copyright © LivingStyle, Inc. All Rights Reserved.
  • 9.
    What's VR ? Virtual Reality:仮想現実  コンピュータによって作り出された仮想空間  3DCGや全天球カメラによる映像を投影する  昨今では、とりわけHMDによる立体視をサポートし、没入感 の高い物を指す場合が多い  テクノロジー  ハンドトラッキング、位置トラッキング、視線トラッキング Copyright © LivingStyle, Inc. All Rights Reserved.
  • 10.
    弊社サービス:VR Copyright © LivingStyle,Inc. All Rights Reserved. 各社インテリアシミュレータ(Web, iPad) Oculus DK2 / ハコスコ対応 リノベる。おうちプランナー(Android, iOS, Windows)
  • 11.
    What’s AR ? Argumented Reality:拡張現実  現実世界の空間に対して、コンピュータによって作り出された モノ(3DCG)を合成  テクノロジー  マーカー認識 (床に置いたマーカーにより床面、サイズを認識)  SLAM (Simultaneous Localization And Mapping) 技術により距離、サイズを 推測  Extended Tracking (マーカーからカメラが外れた際のトラッキング) Copyright © LivingStyle, Inc. All Rights Reserved.
  • 12.
    弊社サービス:AR Copyright © LivingStyle,Inc. All Rights Reserved. 商品詳細 カラー変更 EC連携 ブランド、価格、サイズなどの 商品詳細を一目で確認 ECサイトと連携し、気に入った 商品を即購入が可能 実際のお部屋にインテリアを配置、色替え、移動などをリアルタイムで実現 RoomCo(ルムコ) (Android, iOS)
  • 13.
    What’s MR ? Mixed Reality, Merged Reality:複合現実  現実世界のモノと仮想空間のモノとが相互に作用する  HMDによる ”マーカーレスAR+立体視” をさすケースが多い  テクノロジ  デプスセンサ、位置トラッキング、ハンドトラッキング、オク ルージョン  フレームワーク  Google Tango Copyright © LivingStyle, Inc. All Rights Reserved.
  • 14.
    What’s Google Tango? Copyright © LivingStyle, Inc. All Rights Reserved. 3つのコアテクノロジー Motion Tracking Area Learning Depth Perception つまり、これらのコアテクノロジーにより、 空間をスキャンし点群データからメッシュを作ることが出来る! Tangoではこれを“3D Reconstruction”と呼んでいる。 世界初のTango対応ファブレット!
  • 15.
    ARアプリのTango対応  ”IDC大塚家具 ARアプリ”のTango対応 “空間のスキャン”→”点群データ取得”→”メッシュ生成” ができれば、これまでのARに対して以下が可能になる はず!  マーカーレスで実寸で3Dオブジェクトを配置  壁面や天井面への3Dオブジェクト配置(壁掛け時計,照明)  物体(メッシュ)への衝突検知  現実世界のモノと、仮想空間のモノとのオクルージョン表現  開発環境は”Unity” + “Tango Unity SDK”を使用 Copyright © LivingStyle, Inc. All Rights Reserved.
  • 16.
    弊社サービス:MR Copyright © LivingStyle,Inc. All Rights Reserved. ”Lenovo Phab2 Pro.”で、マーカーレス/衝突検知/オクルージョンを実現! IDC AR for Tango(Android)
  • 17.
    Tips:動的なメッシュの生成 Copyright © LivingStyle,Inc. All Rights Reserved.  TangoManagerで”3D Reconstrction”をONにして、 TangoSDKに付属 の”TangoDynamicMesh”サンプルスクリプトで動的にメッシュを生成できるようにす る Mesh Collider を追加し、 衝突を検出できるように しておく Motion Tracking と Enable Depth も ON Motion Tracking と Enable Depth も ON
  • 18.
    Tips:家具のGameObject設定 Copyright © LivingStyle,Inc. All Rights Reserved.  家具のGameObjectはRigidBodyにし物理特性を与える  Colliderを設定してメッシュとの衝突検知をできるようにする Is Trigger はOFF Is Kinematic はOFF
  • 19.
    Tips:オクルージョン設定 Copyright © LivingStyle,Inc. All Rights Reserved.  オクルージョンはTango AR Cameraの”Enable Occlusion”をON Update Points MeshがON になっている必要がある
  • 20.
    Tips:その他  通常のARエンジンとはワールド原点が違う  PTCVuforiaではマーカー位置がワールドの原点  Tangoではカメラ位置がワールドの原点  赤外線TOFで距離を計測しているため  白熱電球など赤外線を多く含む照明下でのスキャンは苦手  Googleは ”屋内空間での使用” としている  スキャン距離は4m  光沢等の反射物、真っ黒の物体のスキャンは苦手  メッシュに穴が空く Copyright © LivingStyle, Inc. All Rights Reserved.
  • 21.
  • 22.
  • 23.
    質疑応答 Copyright © LivingStyle,Inc. All Rights Reserved. ご質問承ります!
  • 24.
    さいごに Unityエンジニア募集中! recruit@livingstyle.co.jp までよろしくお願いします! Copyright ©LivingStyle, Inc. All Rights Reserved. ご清聴ありがとうございました!