SlideShare a Scribd company logo
1 of 23
takabrz1 大阪駆動開発 Takahiro Miyaura
Azure Object Anchors Recap
宮浦 恭弘 (Miyaura Takahiro)
 大阪駆動開発コミュニティに生息
 HoloLens日本販売してからXR系技術に取組む
 普段はよくMixed Reality Toolkitに関する調査している
 新しい技術や、MRに使えそうな技術を調べる
技術Tips : https://qiita.com/miyaura
takabrz1 ※よかったらこれを機にお知り合いになってください
 リリース機能調べたり・・・
 面白い機能使ってみたり・・・
 新しい実験してフィードバックしたり・・・
(貢献領域:Mixed Reality)
Microsoft MVP for Windows Development 2018-202 1
某会社でSE(アプリケーション領域のアーキテクト的なお仕事なはず)= XRは趣味です
Ignite 2021でのアップデート情報
2021/3/24 Copyright © 2021 Takahiro Miyaura
Ignite 2021でのAzure Object Anchorsの情報
2021/3/24 Copyright © 2021 Takahiro Miyaura
Public Previewとして提供開始がアナウンス
https://blogs.windows.com/japan/2021/03/05/driving-innovation-with-azure-mixed-reality-services/
Private Previewではトヨタ社での先行利用事例が有名
https://blogs.windows.com/japan/2020/09/27/mixed-reality-momentum-hololens-2-expands-globally-and-new-azure-service-launches/
Mixed Realityの活用を
より広げることができる注目のサービス
Mixed Realityの空間を活用するためのサービス
2021/3/24 Copyright © 2021 Takahiro Miyaura
空間情報の活用を支援するMixed Realityサービス
2021/3/24 Copyright © 2021 Takahiro Miyaura
Azure サービスとOSSライブラリ
World Locking Tool
現実空間とデジタル情報の
位置関係を高精度に維持
 Azure Services  Azure Services  OSS Library
パスタ状の仮想物体
Azure Spatial Anchors
現実空間をマーカーとして
デジタル情報を位置合わせ
Azure Object Anchors
現実の物体をマーカーとして
デジタル情報を位置合わせ
Azure Object Anchors
2021/3/24 Copyright © 2021 Takahiro Miyaura
Azure Object Anchors
概要
2021/3/24 Copyright © 2021 Takahiro Miyaura
空間をスキャンし学習済みの形状と照合
HoloLensで認識している空間情報
=現実空間をスキャンし凹凸や奥行を把握
Azure Object Anchors
 Azure Services
学習済み形状モデル
HoloLens 2
①空間スキャン
②空間情報取得
③アンカー設置&可視化
[オプション]診断情報送信
Azure Object Anchors
Runtime SDK
ou
ファイル
インポート 取得
[事前作業]
現実の物体は要登録
APIで登録
3Dモデリング
ツール等で作成
3Dモデル
(参考)Azure Spatial Anchorsはスキャンし
た空間情報を学習済み形状として活用
①空間スキャン
②空間情報取得
③アンカー設置&可視化
Azure Object Anchors
利用について
2021/3/24 Copyright © 2021 Takahiro Miyaura
大きくは2段階の作業
HoloLensで認識している空間情報
=現実空間をスキャンし凹凸や奥行を把握
Azure Object Anchors
 Azure Services
学習済み形状モデル
HoloLens 2
3Dモデル
APIで登録
3Dモデリング
ツール等で作成
Azure Object Anchors
Runtime SDK
ou
ファイル
インポート 取得
[事前作業]
現実空間での利用 モデルの登録
(事前作業)
[オプション]診断情報送信
Azure Object Anchors
利用について – 現実オブジェクトの登録
2021/3/24 Copyright © 2021 Takahiro Miyaura
3DモデルとしてAzure Object Anchorsに登録
【現実オブジェクトは3Dモデルで用意】
 フォーマット .glb, .gltf, .ply, .fbx, .obj
 サイズは1m ~10m の範囲内がスイートスポット
 適切なスケール ユニット
 センチメートル, デシメートル, フィート, インチ,
キロメートル, メートル, ミリメートル, ヤード,
 オブジェクトの重力方向
 例:オブジェクトの下向き-Y の場合は、(0, -1, 0)
【注意点】
サイズが大きく、LOD (詳細レベル) が高いモデルの処理には時間がかかる可能性あり。
Azure Object Anchorsの
オブジェクト変換サービスを利用
• 学習済みモデルはouファイルとして取得
• HoloLensにインポート(ファイルコピー)
Azure Object Anchors
 Azure Services
学習済み形状モデル
3Dモデル
APIで登録
3Dモデリング
ツール等で作成
Azure Object Anchors
Runtime SDK
ou
ファイル
インポート 取得
[事前作業]
Azure Object Anchors
利用について – 現実のオブジェクトの検出と可視化
2021/3/24 Copyright © 2021 Takahiro Miyaura
学習済みモデルと現実空間の情報を照合
HoloLensで認識している空間情報
=現実空間をスキャンし凹凸や奥行を把握
HoloLens 2
①空間スキャン
②空間情報取得
③アンカー設置&可視化
Azure Object Anchors
Runtime SDK
ObjectSearchArea
 現実の物体を検出するエリア範囲
(動画の赤のボックス)
MinSurfaceCoverage
 現実の物体と一致したとみなす表面の
最小カバレッジ率
IsExpectedToBeStandingOnGroundPlane
 現実オブジェクト床面に設置しているかどうか
ExpectedMaxVerticalOrientationInDegrees
 認識可能な上方向と重力の最大角度
MaxScaleChange
 オブジェクトのスケールを調整(0~1)
検出時の主な調整項目
Azure Object Anchors
Quick Startのポイント
 Quick Start通りで問題なく実施できます
 3Dモデルも簡易な方法で試せます
2021/3/24 Copyright © 2021 Takahiro Miyaura
Azure Object Anchors
Quick Start のポイント
2021/3/24 Copyright © 2021 Takahiro Miyaura
実施の際のポイントを紹介 – モデルの生成
 対象にするモデルを用意しましょう
【シンプルな形状を用意】
 そこそこ大き目の物体(1m程度)を用意
 バランスボール、段ボール等
 対称形の物体は方向が不定になります(位置は正確に出ます)
【公式ドキュメント(Azure Object Anchors )】
 全体:https://docs.microsoft.com/ja-jp/azure/object-anchors/
 モデルの登録:https://docs.microsoft.com/ja-jp/azure/object-anchors/quickstarts/get-started-model-conversion
 AOA利用:https://docs.microsoft.com/ja-jp/azure/object-anchors/quickstarts/get-started-unity-hololens-mrtk?tabs=unity-package-web-ui
実寸(m)で入力
Scale:1.0
Apply Scaling:FBX All
例:Blenderでバランスボール用のモデル生成
 Quick Startのコンバージョンツールで登録
 成功するとouファイルが生成されます。
Azure Object Anchors
Quick Start のポイント
2021/3/24 Copyright © 2021 Takahiro Miyaura
実施の際のポイントを紹介 – HoloLens アプリ
【公式ドキュメント(Azure Object Anchors )】
 全体:https://docs.microsoft.com/ja-jp/azure/object-anchors/
 モデルの登録:https://docs.microsoft.com/ja-jp/azure/object-anchors/quickstarts/get-started-model-conversion
 AOA利用:https://docs.microsoft.com/ja-jp/azure/object-anchors/quickstarts/get-started-unity-hololens-mrtk?tabs=unity-package-web-ui
【Device Portal経由でインポート】
 場所:User FoldersLocalAppData
AOAMRTKApp.X.X.X.X_arm64__XXXXXLocalState
Azure Object Anchors
実装の話
 Quick Startのコードをちょっと紹介
2021/3/24 Copyright © 2021 Takahiro Miyaura
Azure Object Anchors
実装の話 - モデル登録とOUファイルの取得
 Quick Startのコードをちょっと紹介
2021/3/24 Copyright © 2021 Takahiro Miyaura
Azure Object Anchors
実装の話 – モデル登録とOUファイルの取得
2021/3/24 Copyright © 2021 Takahiro Miyaura
OUファイルの作成指示
ObjectAnchorsConversionClient client
= new ObjectAnchorsConversionClient([AccountId], [AccountDomain], [AccountKey]);
AssetConversionOperation conversionOperation = null;
var assetOptions = new AssetConversionOptions(
(await client.GetAssetUploadUriAsync()).Value.UploadUri,
AssetFileType.FromFilePath(configuration.InputAssetPath),
new Vector3(0.0f, -1.0f, 0.0f),
AssetLengthUnit.Meters);
conversionOperation = await client.StartAssetConversionAsync(assetOptions);
Azure Object Anchorsの
アカウントID、ドメイン、アカウントキー
モデルデータアップロードURL
(サイズが大きいので非同期用に都度変わる)
3Dモデルデータオブジェクト
AssetFileTypeは読込んだモデルの種類などを情報に持つ
モデルデータの重力方向軸
モデルデータのサイズ単位
Ouファイルの作成指示
Azure Object Anchors
実装の話 – モデル登録とOUファイルの取得
2021/3/24 Copyright © 2021 Takahiro Miyaura
OUファイルのダウンロード
var response = await conversionOperation.WaitForCompletionAsync
(new CancellationTokenSource(TimeSpan.FromMinutes(40)).Token);
if (response.Value.ConversionStatus == AssetConversionStatus.Succeeded) //正常完了の場合
{
BlobClient downloadBlobClient = new BlobClient(response.Value.OutputModelUri);
await downloadBlobClient.DownloadToAsync(outputPath);
}
OUファイルの処理待ち
OUファイルのダウンロード
Azure Object Anchors
実装の話 – オブジェクトの検索と可視化
 Quick Startのコードをちょっと紹介
2021/3/24 Copyright © 2021 Takahiro Miyaura
Azure Object Anchors
実装の話 – オブジェクトの検出と可視化
2021/3/24 Copyright © 2021 Takahiro Miyaura
|・ω・)b 絶賛調査中!
そもそも説明時間足りないことに気づく・・・
詳細はQiita記事を待ってて
まとめ
2021/3/24 Copyright © 2021 Takahiro Miyaura
まとめ
2021/3/24 Copyright © 2021 Takahiro Miyaura
Azure Mixed Reality の新しいサービス
Azure Object Anchors
3Dモデル形状を登録
現実空間から学習済モデルと一致する現実の物体を検索
現実の物体位置、向きを推定しデジタル情報と位置合わせ
Azure Object Anchorsが加わった
Azure Mixed Reality サービスでMixed Realityの活用範囲が広がる
大阪駆動開発
関西を中心に、IT系のおもしろそうなことを楽しんでやるコミュニティ
2021/3/24 Copyright © 2021 Takahiro Miyaura

More Related Content

What's hot

Azure Spatial Anchorsのユースケース「Way-Finding」を実現するためのテクニック
Azure Spatial Anchorsのユースケース「Way-Finding」を実現するためのテクニックAzure Spatial Anchorsのユースケース「Way-Finding」を実現するためのテクニック
Azure Spatial Anchorsのユースケース「Way-Finding」を実現するためのテクニックTakahiro Miyaura
 
Unreal Engine でアプリ開発~ MRTK UXTools for Unreal V0.9.0 ~
Unreal Engine でアプリ開発~ MRTK UXTools for Unreal V0.9.0 ~Unreal Engine でアプリ開発~ MRTK UXTools for Unreal V0.9.0 ~
Unreal Engine でアプリ開発~ MRTK UXTools for Unreal V0.9.0 ~Takahiro Miyaura
 
Mixed RealityとAzure Digital Twinsを組合わせてデジタルツインを可視化するためのTips
Mixed RealityとAzure Digital Twinsを組合わせてデジタルツインを可視化するためのTipsMixed RealityとAzure Digital Twinsを組合わせてデジタルツインを可視化するためのTips
Mixed RealityとAzure Digital Twinsを組合わせてデジタルツインを可視化するためのTipsTakahiro Miyaura
 
今改めて見る Plane finding
今改めて見る Plane finding今改めて見る Plane finding
今改めて見る Plane findingTakahiro Miyaura
 
Mixed Reality Toolkit V2におけるマルチデバイス対応 ~ Azure Spatial Anchorsとphotonによるシェアリング...
Mixed Reality Toolkit V2におけるマルチデバイス対応~ Azure Spatial Anchorsとphotonによるシェアリング...Mixed Reality Toolkit V2におけるマルチデバイス対応~ Azure Spatial Anchorsとphotonによるシェアリング...
Mixed Reality Toolkit V2におけるマルチデバイス対応 ~ Azure Spatial Anchorsとphotonによるシェアリング...Takahiro Miyaura
 
ラーニングパス「Azure Digital Twins と Unity を使用して Mixed Reality デジタル ツインを構築する」にAzure ...
ラーニングパス「Azure Digital Twins と Unity を使用して Mixed Reality デジタル ツインを構築する」にAzure ...ラーニングパス「Azure Digital Twins と Unity を使用して Mixed Reality デジタル ツインを構築する」にAzure ...
ラーニングパス「Azure Digital Twins と Unity を使用して Mixed Reality デジタル ツインを構築する」にAzure ...Takahiro Miyaura
 
Mixed Reality Toolkit V2.2.0のMobile対応について
Mixed Reality Toolkit V2.2.0のMobile対応についてMixed Reality Toolkit V2.2.0のMobile対応について
Mixed Reality Toolkit V2.2.0のMobile対応についてTakahiro Miyaura
 
World Locking Tools V1.0.0について~ 機能と導入 ~
World Locking Tools V1.0.0について~ 機能と導入 ~ World Locking Tools V1.0.0について~ 機能と導入 ~
World Locking Tools V1.0.0について~ 機能と導入 ~ Takahiro Miyaura
 
UIデザイン設計から開発をつなぐ「MRTK Figma Bridge for Unity」を使ってみよう
UIデザイン設計から開発をつなぐ「MRTK Figma Bridge for Unity」を使ってみようUIデザイン設計から開発をつなぐ「MRTK Figma Bridge for Unity」を使ってみよう
UIデザイン設計から開発をつなぐ「MRTK Figma Bridge for Unity」を使ってみようTakahiro Miyaura
 
Azure Object Anchors のQuick Startで理解を深めたい
Azure Object Anchors のQuick Startで理解を深めたいAzure Object Anchors のQuick Startで理解を深めたい
Azure Object Anchors のQuick Startで理解を深めたいTakahiro Miyaura
 
Mixed Reality関連のSDKの状況を調べてみた
Mixed Reality関連のSDKの状況を調べてみたMixed Reality関連のSDKの状況を調べてみた
Mixed Reality関連のSDKの状況を調べてみたTakahiro Miyaura
 
Mixed Reality Toolkit V2のMixed Reality Scene Systemを使う
Mixed Reality Toolkit V2のMixed Reality Scene Systemを使うMixed Reality Toolkit V2のMixed Reality Scene Systemを使う
Mixed Reality Toolkit V2のMixed Reality Scene Systemを使うTakahiro Miyaura
 
HoloLens 2 TutorialをMobileARで動かす
HoloLens 2 TutorialをMobileARで動かすHoloLens 2 TutorialをMobileARで動かす
HoloLens 2 TutorialをMobileARで動かすTakahiro Miyaura
 
久しぶりにMicrosoft Meshを使ってみた - 色々変わってたよ編 -
久しぶりにMicrosoft Meshを使ってみた - 色々変わってたよ編 -久しぶりにMicrosoft Meshを使ってみた - 色々変わってたよ編 -
久しぶりにMicrosoft Meshを使ってみた - 色々変わってたよ編 -Takahiro Miyaura
 
Scrolling CollectionsとElastic System(Mixed Reality Toolkit V2.5.1)
Scrolling CollectionsとElastic System(Mixed Reality Toolkit V2.5.1)Scrolling CollectionsとElastic System(Mixed Reality Toolkit V2.5.1)
Scrolling CollectionsとElastic System(Mixed Reality Toolkit V2.5.1)Takahiro Miyaura
 
Spatial Mappingの設定が気になる
Spatial Mappingの設定が気になるSpatial Mappingの設定が気になる
Spatial Mappingの設定が気になるTakahiro Miyaura
 
Mixed Reality Toolkit V2.4.0の機能 ~ Progress Indicator ~
Mixed Reality Toolkit V2.4.0の機能 ~ Progress Indicator ~Mixed Reality Toolkit V2.4.0の機能 ~ Progress Indicator ~
Mixed Reality Toolkit V2.4.0の機能 ~ Progress Indicator ~Takahiro Miyaura
 
World Locking Toolについて
World Locking ToolについてWorld Locking Toolについて
World Locking ToolについてTakahiro Miyaura
 
Mixed Reality Toolkit V3について
Mixed Reality Toolkit V3についてMixed Reality Toolkit V3について
Mixed Reality Toolkit V3についてTakahiro Miyaura
 
HoloLensで外部定義ファイルを使う
HoloLensで外部定義ファイルを使うHoloLensで外部定義ファイルを使う
HoloLensで外部定義ファイルを使うTakahiro Miyaura
 

What's hot (20)

Azure Spatial Anchorsのユースケース「Way-Finding」を実現するためのテクニック
Azure Spatial Anchorsのユースケース「Way-Finding」を実現するためのテクニックAzure Spatial Anchorsのユースケース「Way-Finding」を実現するためのテクニック
Azure Spatial Anchorsのユースケース「Way-Finding」を実現するためのテクニック
 
Unreal Engine でアプリ開発~ MRTK UXTools for Unreal V0.9.0 ~
Unreal Engine でアプリ開発~ MRTK UXTools for Unreal V0.9.0 ~Unreal Engine でアプリ開発~ MRTK UXTools for Unreal V0.9.0 ~
Unreal Engine でアプリ開発~ MRTK UXTools for Unreal V0.9.0 ~
 
Mixed RealityとAzure Digital Twinsを組合わせてデジタルツインを可視化するためのTips
Mixed RealityとAzure Digital Twinsを組合わせてデジタルツインを可視化するためのTipsMixed RealityとAzure Digital Twinsを組合わせてデジタルツインを可視化するためのTips
Mixed RealityとAzure Digital Twinsを組合わせてデジタルツインを可視化するためのTips
 
今改めて見る Plane finding
今改めて見る Plane finding今改めて見る Plane finding
今改めて見る Plane finding
 
Mixed Reality Toolkit V2におけるマルチデバイス対応 ~ Azure Spatial Anchorsとphotonによるシェアリング...
Mixed Reality Toolkit V2におけるマルチデバイス対応~ Azure Spatial Anchorsとphotonによるシェアリング...Mixed Reality Toolkit V2におけるマルチデバイス対応~ Azure Spatial Anchorsとphotonによるシェアリング...
Mixed Reality Toolkit V2におけるマルチデバイス対応 ~ Azure Spatial Anchorsとphotonによるシェアリング...
 
ラーニングパス「Azure Digital Twins と Unity を使用して Mixed Reality デジタル ツインを構築する」にAzure ...
ラーニングパス「Azure Digital Twins と Unity を使用して Mixed Reality デジタル ツインを構築する」にAzure ...ラーニングパス「Azure Digital Twins と Unity を使用して Mixed Reality デジタル ツインを構築する」にAzure ...
ラーニングパス「Azure Digital Twins と Unity を使用して Mixed Reality デジタル ツインを構築する」にAzure ...
 
Mixed Reality Toolkit V2.2.0のMobile対応について
Mixed Reality Toolkit V2.2.0のMobile対応についてMixed Reality Toolkit V2.2.0のMobile対応について
Mixed Reality Toolkit V2.2.0のMobile対応について
 
World Locking Tools V1.0.0について~ 機能と導入 ~
World Locking Tools V1.0.0について~ 機能と導入 ~ World Locking Tools V1.0.0について~ 機能と導入 ~
World Locking Tools V1.0.0について~ 機能と導入 ~
 
UIデザイン設計から開発をつなぐ「MRTK Figma Bridge for Unity」を使ってみよう
UIデザイン設計から開発をつなぐ「MRTK Figma Bridge for Unity」を使ってみようUIデザイン設計から開発をつなぐ「MRTK Figma Bridge for Unity」を使ってみよう
UIデザイン設計から開発をつなぐ「MRTK Figma Bridge for Unity」を使ってみよう
 
Azure Object Anchors のQuick Startで理解を深めたい
Azure Object Anchors のQuick Startで理解を深めたいAzure Object Anchors のQuick Startで理解を深めたい
Azure Object Anchors のQuick Startで理解を深めたい
 
Mixed Reality関連のSDKの状況を調べてみた
Mixed Reality関連のSDKの状況を調べてみたMixed Reality関連のSDKの状況を調べてみた
Mixed Reality関連のSDKの状況を調べてみた
 
Mixed Reality Toolkit V2のMixed Reality Scene Systemを使う
Mixed Reality Toolkit V2のMixed Reality Scene Systemを使うMixed Reality Toolkit V2のMixed Reality Scene Systemを使う
Mixed Reality Toolkit V2のMixed Reality Scene Systemを使う
 
HoloLens 2 TutorialをMobileARで動かす
HoloLens 2 TutorialをMobileARで動かすHoloLens 2 TutorialをMobileARで動かす
HoloLens 2 TutorialをMobileARで動かす
 
久しぶりにMicrosoft Meshを使ってみた - 色々変わってたよ編 -
久しぶりにMicrosoft Meshを使ってみた - 色々変わってたよ編 -久しぶりにMicrosoft Meshを使ってみた - 色々変わってたよ編 -
久しぶりにMicrosoft Meshを使ってみた - 色々変わってたよ編 -
 
Scrolling CollectionsとElastic System(Mixed Reality Toolkit V2.5.1)
Scrolling CollectionsとElastic System(Mixed Reality Toolkit V2.5.1)Scrolling CollectionsとElastic System(Mixed Reality Toolkit V2.5.1)
Scrolling CollectionsとElastic System(Mixed Reality Toolkit V2.5.1)
 
Spatial Mappingの設定が気になる
Spatial Mappingの設定が気になるSpatial Mappingの設定が気になる
Spatial Mappingの設定が気になる
 
Mixed Reality Toolkit V2.4.0の機能 ~ Progress Indicator ~
Mixed Reality Toolkit V2.4.0の機能 ~ Progress Indicator ~Mixed Reality Toolkit V2.4.0の機能 ~ Progress Indicator ~
Mixed Reality Toolkit V2.4.0の機能 ~ Progress Indicator ~
 
World Locking Toolについて
World Locking ToolについてWorld Locking Toolについて
World Locking Toolについて
 
Mixed Reality Toolkit V3について
Mixed Reality Toolkit V3についてMixed Reality Toolkit V3について
Mixed Reality Toolkit V3について
 
HoloLensで外部定義ファイルを使う
HoloLensで外部定義ファイルを使うHoloLensで外部定義ファイルを使う
HoloLensで外部定義ファイルを使う
 

Similar to Azure Object Anchors Recap(Kobe版)

World Locking Tools でAzure Spatial Anchorsが使えるようになった
World Locking Tools でAzure Spatial Anchorsが使えるようになったWorld Locking Tools でAzure Spatial Anchorsが使えるようになった
World Locking Tools でAzure Spatial Anchorsが使えるようになったTakahiro Miyaura
 
Unreal Engine でアプリ開発~ MRTK UXTools for Unreal V0.9.0 ~
Unreal Engine でアプリ開発~ MRTK UXTools for Unreal V0.9.0 ~Unreal Engine でアプリ開発~ MRTK UXTools for Unreal V0.9.0 ~
Unreal Engine でアプリ開発~ MRTK UXTools for Unreal V0.9.0 ~Takahiro Miyaura
 
Azure Digital TwinとUnreal Engineを統合するADTLink Pluginについて
 Azure Digital TwinとUnreal Engineを統合するADTLink Pluginについて Azure Digital TwinとUnreal Engineを統合するADTLink Pluginについて
Azure Digital TwinとUnreal Engineを統合するADTLink PluginについてTakahiro Miyaura
 
Mixed Reality Feature ToolとMixed Reality Toolkit V2.6.1
Mixed Reality Feature ToolとMixed Reality Toolkit V2.6.1Mixed Reality Feature ToolとMixed Reality Toolkit V2.6.1
Mixed Reality Feature ToolとMixed Reality Toolkit V2.6.1Takahiro Miyaura
 
LIFULL HOME'S「かざして検索」リリースの裏側
LIFULL HOME'S「かざして検索」リリースの裏側LIFULL HOME'S「かざして検索」リリースの裏側
LIFULL HOME'S「かざして検索」リリースの裏側Takuro Hanawa
 
OpenXR + XR Interaction Toolkit使ったHoloLensコンテンツ開発検証 ~ (私が)完全に理解できたらちゃんと作れて、いろ...
OpenXR + XR Interaction Toolkit使ったHoloLensコンテンツ開発検証 ~ (私が)完全に理解できたらちゃんと作れて、いろ...OpenXR + XR Interaction Toolkit使ったHoloLensコンテンツ開発検証 ~ (私が)完全に理解できたらちゃんと作れて、いろ...
OpenXR + XR Interaction Toolkit使ったHoloLensコンテンツ開発検証 ~ (私が)完全に理解できたらちゃんと作れて、いろ...Takahiro Miyaura
 
Way-Findingをやってやった ~ Azure Spatial Anchorsでね~
Way-Findingをやってやった ~ Azure Spatial Anchorsでね~Way-Findingをやってやった ~ Azure Spatial Anchorsでね~
Way-Findingをやってやった ~ Azure Spatial Anchorsでね~Takahiro Miyaura
 
XRマルチデバイス開発を可能にするOSSライブラリ「MRTK-vNEXT」について
XRマルチデバイス開発を可能にするOSSライブラリ「MRTK-vNEXT」についてXRマルチデバイス開発を可能にするOSSライブラリ「MRTK-vNEXT」について
XRマルチデバイス開発を可能にするOSSライブラリ「MRTK-vNEXT」についてTakahiro Miyaura
 
.NET Core for Mac users in Azure
.NET Core for Mac users in Azure.NET Core for Mac users in Azure
.NET Core for Mac users in AzureTsukasa Kato
 
Microsoft Ignite 2022の情報 & Microsoft Learnの整理をしてみた
Microsoft Ignite 2022の情報 & Microsoft Learnの整理をしてみたMicrosoft Ignite 2022の情報 & Microsoft Learnの整理をしてみた
Microsoft Ignite 2022の情報 & Microsoft Learnの整理をしてみたTakahiro Miyaura
 
Mixed Reality Toolkit 3 Recap
Mixed Reality Toolkit 3 RecapMixed Reality Toolkit 3 Recap
Mixed Reality Toolkit 3 RecapTakahiro Miyaura
 
ITフォーラム2024 AITCセッション(3)
ITフォーラム2024 AITCセッション(3)ITフォーラム2024 AITCセッション(3)
ITフォーラム2024 AITCセッション(3)aitc_jp
 
20230728_VMUG_cisco.pptx
20230728_VMUG_cisco.pptx20230728_VMUG_cisco.pptx
20230728_VMUG_cisco.pptxunemotoakihiro
 
IoT(Bluetooth mesh) × サーバーレス
IoT(Bluetooth mesh) × サーバーレスIoT(Bluetooth mesh) × サーバーレス
IoT(Bluetooth mesh) × サーバーレスMasahiro NAKAYAMA
 
20210925_jazug_azure_what_to_do_first
20210925_jazug_azure_what_to_do_first20210925_jazug_azure_what_to_do_first
20210925_jazug_azure_what_to_do_firstTomoakiOno
 
覗いてみよう。with/afterコロナ時代に輝くMixedRealityの世界。
覗いてみよう。with/afterコロナ時代に輝くMixedRealityの世界。覗いてみよう。with/afterコロナ時代に輝くMixedRealityの世界。
覗いてみよう。with/afterコロナ時代に輝くMixedRealityの世界。Shingo Mori
 
JAZUG_TOHOKU_modeki_20230324_共有版.pdf
JAZUG_TOHOKU_modeki_20230324_共有版.pdfJAZUG_TOHOKU_modeki_20230324_共有版.pdf
JAZUG_TOHOKU_modeki_20230324_共有版.pdfYuya Modeki
 

Similar to Azure Object Anchors Recap(Kobe版) (20)

World Locking Tools でAzure Spatial Anchorsが使えるようになった
World Locking Tools でAzure Spatial Anchorsが使えるようになったWorld Locking Tools でAzure Spatial Anchorsが使えるようになった
World Locking Tools でAzure Spatial Anchorsが使えるようになった
 
Unreal Engine でアプリ開発~ MRTK UXTools for Unreal V0.9.0 ~
Unreal Engine でアプリ開発~ MRTK UXTools for Unreal V0.9.0 ~Unreal Engine でアプリ開発~ MRTK UXTools for Unreal V0.9.0 ~
Unreal Engine でアプリ開発~ MRTK UXTools for Unreal V0.9.0 ~
 
Azure Digital TwinとUnreal Engineを統合するADTLink Pluginについて
 Azure Digital TwinとUnreal Engineを統合するADTLink Pluginについて Azure Digital TwinとUnreal Engineを統合するADTLink Pluginについて
Azure Digital TwinとUnreal Engineを統合するADTLink Pluginについて
 
Mixed Reality Feature ToolとMixed Reality Toolkit V2.6.1
Mixed Reality Feature ToolとMixed Reality Toolkit V2.6.1Mixed Reality Feature ToolとMixed Reality Toolkit V2.6.1
Mixed Reality Feature ToolとMixed Reality Toolkit V2.6.1
 
LIFULL HOME'S「かざして検索」リリースの裏側
LIFULL HOME'S「かざして検索」リリースの裏側LIFULL HOME'S「かざして検索」リリースの裏側
LIFULL HOME'S「かざして検索」リリースの裏側
 
IoT のシナリオを変える Azure SQL Edge
IoT のシナリオを変える Azure SQL EdgeIoT のシナリオを変える Azure SQL Edge
IoT のシナリオを変える Azure SQL Edge
 
OpenXR + XR Interaction Toolkit使ったHoloLensコンテンツ開発検証 ~ (私が)完全に理解できたらちゃんと作れて、いろ...
OpenXR + XR Interaction Toolkit使ったHoloLensコンテンツ開発検証 ~ (私が)完全に理解できたらちゃんと作れて、いろ...OpenXR + XR Interaction Toolkit使ったHoloLensコンテンツ開発検証 ~ (私が)完全に理解できたらちゃんと作れて、いろ...
OpenXR + XR Interaction Toolkit使ったHoloLensコンテンツ開発検証 ~ (私が)完全に理解できたらちゃんと作れて、いろ...
 
Way-Findingをやってやった ~ Azure Spatial Anchorsでね~
Way-Findingをやってやった ~ Azure Spatial Anchorsでね~Way-Findingをやってやった ~ Azure Spatial Anchorsでね~
Way-Findingをやってやった ~ Azure Spatial Anchorsでね~
 
MRTK3を調べてみた
MRTK3を調べてみたMRTK3を調べてみた
MRTK3を調べてみた
 
XRマルチデバイス開発を可能にするOSSライブラリ「MRTK-vNEXT」について
XRマルチデバイス開発を可能にするOSSライブラリ「MRTK-vNEXT」についてXRマルチデバイス開発を可能にするOSSライブラリ「MRTK-vNEXT」について
XRマルチデバイス開発を可能にするOSSライブラリ「MRTK-vNEXT」について
 
.NET Core for Mac users in Azure
.NET Core for Mac users in Azure.NET Core for Mac users in Azure
.NET Core for Mac users in Azure
 
Microsoft Ignite 2022の情報 & Microsoft Learnの整理をしてみた
Microsoft Ignite 2022の情報 & Microsoft Learnの整理をしてみたMicrosoft Ignite 2022の情報 & Microsoft Learnの整理をしてみた
Microsoft Ignite 2022の情報 & Microsoft Learnの整理をしてみた
 
Mixed Reality Toolkit 3 Recap
Mixed Reality Toolkit 3 RecapMixed Reality Toolkit 3 Recap
Mixed Reality Toolkit 3 Recap
 
ITフォーラム2024 AITCセッション(3)
ITフォーラム2024 AITCセッション(3)ITフォーラム2024 AITCセッション(3)
ITフォーラム2024 AITCセッション(3)
 
20230728_VMUG_cisco.pptx
20230728_VMUG_cisco.pptx20230728_VMUG_cisco.pptx
20230728_VMUG_cisco.pptx
 
IoT(Bluetooth mesh) × サーバーレス
IoT(Bluetooth mesh) × サーバーレスIoT(Bluetooth mesh) × サーバーレス
IoT(Bluetooth mesh) × サーバーレス
 
[Japan Tech summit 2017] CLD 021
[Japan Tech summit 2017]  CLD 021[Japan Tech summit 2017]  CLD 021
[Japan Tech summit 2017] CLD 021
 
20210925_jazug_azure_what_to_do_first
20210925_jazug_azure_what_to_do_first20210925_jazug_azure_what_to_do_first
20210925_jazug_azure_what_to_do_first
 
覗いてみよう。with/afterコロナ時代に輝くMixedRealityの世界。
覗いてみよう。with/afterコロナ時代に輝くMixedRealityの世界。覗いてみよう。with/afterコロナ時代に輝くMixedRealityの世界。
覗いてみよう。with/afterコロナ時代に輝くMixedRealityの世界。
 
JAZUG_TOHOKU_modeki_20230324_共有版.pdf
JAZUG_TOHOKU_modeki_20230324_共有版.pdfJAZUG_TOHOKU_modeki_20230324_共有版.pdf
JAZUG_TOHOKU_modeki_20230324_共有版.pdf
 

More from Takahiro Miyaura

Mixed Reality Toolkit 3 の更新状況 - 6月からもちょいちょいアップデートされてるよ
Mixed Reality Toolkit 3 の更新状況 - 6月からもちょいちょいアップデートされてるよMixed Reality Toolkit 3 の更新状況 - 6月からもちょいちょいアップデートされてるよ
Mixed Reality Toolkit 3 の更新状況 - 6月からもちょいちょいアップデートされてるよTakahiro Miyaura
 
Mixed Reality Toolkit 3 - 「MRTK XR Rig」と「Bounds Control」
Mixed Reality Toolkit 3 - 「MRTK XR Rig」と「Bounds Control」Mixed Reality Toolkit 3 - 「MRTK XR Rig」と「Bounds Control」
Mixed Reality Toolkit 3 - 「MRTK XR Rig」と「Bounds Control」Takahiro Miyaura
 
Mixed Reality Toolkit 3 のチュートリアル「Zappy’s Playground」のUXをみる
Mixed Reality Toolkit 3 のチュートリアル「Zappy’s Playground」のUXをみるMixed Reality Toolkit 3 のチュートリアル「Zappy’s Playground」のUXをみる
Mixed Reality Toolkit 3 のチュートリアル「Zappy’s Playground」のUXをみるTakahiro Miyaura
 
Mixed Reality Toolkit 3 のチュートリアル「Zappy’s Playground」の紹介
Mixed Reality Toolkit 3 のチュートリアル「Zappy’s Playground」の紹介Mixed Reality Toolkit 3 のチュートリアル「Zappy’s Playground」の紹介
Mixed Reality Toolkit 3 のチュートリアル「Zappy’s Playground」の紹介Takahiro Miyaura
 
【続】OpenXRでHoloLensアプリを作る
【続】OpenXRでHoloLensアプリを作る【続】OpenXRでHoloLensアプリを作る
【続】OpenXRでHoloLensアプリを作るTakahiro Miyaura
 
OpenVRやOpenXRの基本的なことを調べてみた
OpenVRやOpenXRの基本的なことを調べてみたOpenVRやOpenXRの基本的なことを調べてみた
OpenVRやOpenXRの基本的なことを調べてみたTakahiro Miyaura
 
Mixed Reality Toolkit で OpenXRのEye Trackingを使う
Mixed Reality Toolkit で OpenXRのEye Trackingを使うMixed Reality Toolkit で OpenXRのEye Trackingを使う
Mixed Reality Toolkit で OpenXRのEye Trackingを使うTakahiro Miyaura
 
5周年ふりかえり!HoloLens 1とHoloLens 2のUI操作と実装の違いを改めて見てみよう
5周年ふりかえり!HoloLens 1とHoloLens 2のUI操作と実装の違いを改めて見てみよう5周年ふりかえり!HoloLens 1とHoloLens 2のUI操作と実装の違いを改めて見てみよう
5周年ふりかえり!HoloLens 1とHoloLens 2のUI操作と実装の違いを改めて見てみようTakahiro Miyaura
 
「あれ」がスマホで動くのか試してみた
「あれ」がスマホで動くのか試してみた「あれ」がスマホで動くのか試してみた
「あれ」がスマホで動くのか試してみたTakahiro Miyaura
 
HoloLens1アプリをHoloLens2アプリに変換できるかチャレンジ
HoloLens1アプリをHoloLens2アプリに変換できるかチャレンジHoloLens1アプリをHoloLens2アプリに変換できるかチャレンジ
HoloLens1アプリをHoloLens2アプリに変換できるかチャレンジTakahiro Miyaura
 
HoloLens 1のアプリをHoloLens 2に移行する
HoloLens 1のアプリをHoloLens 2に移行するHoloLens 1のアプリをHoloLens 2に移行する
HoloLens 1のアプリをHoloLens 2に移行するTakahiro Miyaura
 
Unityは知ってる開発者が UE4 で HoloLens 2 アプリ開発セションを聞くために知っておくといいかもTips
Unityは知ってる開発者が UE4 で HoloLens 2 アプリ開発セションを聞くために知っておくといいかもTipsUnityは知ってる開発者が UE4 で HoloLens 2 アプリ開発セションを聞くために知っておくといいかもTips
Unityは知ってる開発者が UE4 で HoloLens 2 アプリ開発セションを聞くために知っておくといいかもTipsTakahiro Miyaura
 

More from Takahiro Miyaura (12)

Mixed Reality Toolkit 3 の更新状況 - 6月からもちょいちょいアップデートされてるよ
Mixed Reality Toolkit 3 の更新状況 - 6月からもちょいちょいアップデートされてるよMixed Reality Toolkit 3 の更新状況 - 6月からもちょいちょいアップデートされてるよ
Mixed Reality Toolkit 3 の更新状況 - 6月からもちょいちょいアップデートされてるよ
 
Mixed Reality Toolkit 3 - 「MRTK XR Rig」と「Bounds Control」
Mixed Reality Toolkit 3 - 「MRTK XR Rig」と「Bounds Control」Mixed Reality Toolkit 3 - 「MRTK XR Rig」と「Bounds Control」
Mixed Reality Toolkit 3 - 「MRTK XR Rig」と「Bounds Control」
 
Mixed Reality Toolkit 3 のチュートリアル「Zappy’s Playground」のUXをみる
Mixed Reality Toolkit 3 のチュートリアル「Zappy’s Playground」のUXをみるMixed Reality Toolkit 3 のチュートリアル「Zappy’s Playground」のUXをみる
Mixed Reality Toolkit 3 のチュートリアル「Zappy’s Playground」のUXをみる
 
Mixed Reality Toolkit 3 のチュートリアル「Zappy’s Playground」の紹介
Mixed Reality Toolkit 3 のチュートリアル「Zappy’s Playground」の紹介Mixed Reality Toolkit 3 のチュートリアル「Zappy’s Playground」の紹介
Mixed Reality Toolkit 3 のチュートリアル「Zappy’s Playground」の紹介
 
【続】OpenXRでHoloLensアプリを作る
【続】OpenXRでHoloLensアプリを作る【続】OpenXRでHoloLensアプリを作る
【続】OpenXRでHoloLensアプリを作る
 
OpenVRやOpenXRの基本的なことを調べてみた
OpenVRやOpenXRの基本的なことを調べてみたOpenVRやOpenXRの基本的なことを調べてみた
OpenVRやOpenXRの基本的なことを調べてみた
 
Mixed Reality Toolkit で OpenXRのEye Trackingを使う
Mixed Reality Toolkit で OpenXRのEye Trackingを使うMixed Reality Toolkit で OpenXRのEye Trackingを使う
Mixed Reality Toolkit で OpenXRのEye Trackingを使う
 
5周年ふりかえり!HoloLens 1とHoloLens 2のUI操作と実装の違いを改めて見てみよう
5周年ふりかえり!HoloLens 1とHoloLens 2のUI操作と実装の違いを改めて見てみよう5周年ふりかえり!HoloLens 1とHoloLens 2のUI操作と実装の違いを改めて見てみよう
5周年ふりかえり!HoloLens 1とHoloLens 2のUI操作と実装の違いを改めて見てみよう
 
「あれ」がスマホで動くのか試してみた
「あれ」がスマホで動くのか試してみた「あれ」がスマホで動くのか試してみた
「あれ」がスマホで動くのか試してみた
 
HoloLens1アプリをHoloLens2アプリに変換できるかチャレンジ
HoloLens1アプリをHoloLens2アプリに変換できるかチャレンジHoloLens1アプリをHoloLens2アプリに変換できるかチャレンジ
HoloLens1アプリをHoloLens2アプリに変換できるかチャレンジ
 
HoloLens 1のアプリをHoloLens 2に移行する
HoloLens 1のアプリをHoloLens 2に移行するHoloLens 1のアプリをHoloLens 2に移行する
HoloLens 1のアプリをHoloLens 2に移行する
 
Unityは知ってる開発者が UE4 で HoloLens 2 アプリ開発セションを聞くために知っておくといいかもTips
Unityは知ってる開発者が UE4 で HoloLens 2 アプリ開発セションを聞くために知っておくといいかもTipsUnityは知ってる開発者が UE4 で HoloLens 2 アプリ開発セションを聞くために知っておくといいかもTips
Unityは知ってる開発者が UE4 で HoloLens 2 アプリ開発セションを聞くために知っておくといいかもTips
 

Recently uploaded

[DevOpsDays Tokyo 2024] 〜デジタルとアナログのはざまに〜 スマートビルディング爆速開発を支える 自動化テスト戦略
[DevOpsDays Tokyo 2024] 〜デジタルとアナログのはざまに〜 スマートビルディング爆速開発を支える 自動化テスト戦略[DevOpsDays Tokyo 2024] 〜デジタルとアナログのはざまに〜 スマートビルディング爆速開発を支える 自動化テスト戦略
[DevOpsDays Tokyo 2024] 〜デジタルとアナログのはざまに〜 スマートビルディング爆速開発を支える 自動化テスト戦略Ryo Sasaki
 
IoT in the era of generative AI, Thanks IoT ALGYAN.pptx
IoT in the era of generative AI, Thanks IoT ALGYAN.pptxIoT in the era of generative AI, Thanks IoT ALGYAN.pptx
IoT in the era of generative AI, Thanks IoT ALGYAN.pptxAtomu Hidaka
 
スマートフォンを用いた新生児あやし動作の教示システム
スマートフォンを用いた新生児あやし動作の教示システムスマートフォンを用いた新生児あやし動作の教示システム
スマートフォンを用いた新生児あやし動作の教示システムsugiuralab
 
PHP-Conference-Odawara-2024-04-000000000
PHP-Conference-Odawara-2024-04-000000000PHP-Conference-Odawara-2024-04-000000000
PHP-Conference-Odawara-2024-04-000000000Shota Ito
 
Postman LT Fukuoka_Quick Prototype_By Daniel
Postman LT Fukuoka_Quick Prototype_By DanielPostman LT Fukuoka_Quick Prototype_By Daniel
Postman LT Fukuoka_Quick Prototype_By Danieldanielhu54
 
Open Source UN-Conference 2024 Kawagoe - 独自OS「DaisyOS GB」の紹介
Open Source UN-Conference 2024 Kawagoe - 独自OS「DaisyOS GB」の紹介Open Source UN-Conference 2024 Kawagoe - 独自OS「DaisyOS GB」の紹介
Open Source UN-Conference 2024 Kawagoe - 独自OS「DaisyOS GB」の紹介Yuma Ohgami
 
UPWARD_share_company_information_20240415.pdf
UPWARD_share_company_information_20240415.pdfUPWARD_share_company_information_20240415.pdf
UPWARD_share_company_information_20240415.pdffurutsuka
 

Recently uploaded (7)

[DevOpsDays Tokyo 2024] 〜デジタルとアナログのはざまに〜 スマートビルディング爆速開発を支える 自動化テスト戦略
[DevOpsDays Tokyo 2024] 〜デジタルとアナログのはざまに〜 スマートビルディング爆速開発を支える 自動化テスト戦略[DevOpsDays Tokyo 2024] 〜デジタルとアナログのはざまに〜 スマートビルディング爆速開発を支える 自動化テスト戦略
[DevOpsDays Tokyo 2024] 〜デジタルとアナログのはざまに〜 スマートビルディング爆速開発を支える 自動化テスト戦略
 
IoT in the era of generative AI, Thanks IoT ALGYAN.pptx
IoT in the era of generative AI, Thanks IoT ALGYAN.pptxIoT in the era of generative AI, Thanks IoT ALGYAN.pptx
IoT in the era of generative AI, Thanks IoT ALGYAN.pptx
 
スマートフォンを用いた新生児あやし動作の教示システム
スマートフォンを用いた新生児あやし動作の教示システムスマートフォンを用いた新生児あやし動作の教示システム
スマートフォンを用いた新生児あやし動作の教示システム
 
PHP-Conference-Odawara-2024-04-000000000
PHP-Conference-Odawara-2024-04-000000000PHP-Conference-Odawara-2024-04-000000000
PHP-Conference-Odawara-2024-04-000000000
 
Postman LT Fukuoka_Quick Prototype_By Daniel
Postman LT Fukuoka_Quick Prototype_By DanielPostman LT Fukuoka_Quick Prototype_By Daniel
Postman LT Fukuoka_Quick Prototype_By Daniel
 
Open Source UN-Conference 2024 Kawagoe - 独自OS「DaisyOS GB」の紹介
Open Source UN-Conference 2024 Kawagoe - 独自OS「DaisyOS GB」の紹介Open Source UN-Conference 2024 Kawagoe - 独自OS「DaisyOS GB」の紹介
Open Source UN-Conference 2024 Kawagoe - 独自OS「DaisyOS GB」の紹介
 
UPWARD_share_company_information_20240415.pdf
UPWARD_share_company_information_20240415.pdfUPWARD_share_company_information_20240415.pdf
UPWARD_share_company_information_20240415.pdf
 

Azure Object Anchors Recap(Kobe版)

  • 1. takabrz1 大阪駆動開発 Takahiro Miyaura Azure Object Anchors Recap
  • 2. 宮浦 恭弘 (Miyaura Takahiro)  大阪駆動開発コミュニティに生息  HoloLens日本販売してからXR系技術に取組む  普段はよくMixed Reality Toolkitに関する調査している  新しい技術や、MRに使えそうな技術を調べる 技術Tips : https://qiita.com/miyaura takabrz1 ※よかったらこれを機にお知り合いになってください  リリース機能調べたり・・・  面白い機能使ってみたり・・・  新しい実験してフィードバックしたり・・・ (貢献領域:Mixed Reality) Microsoft MVP for Windows Development 2018-202 1 某会社でSE(アプリケーション領域のアーキテクト的なお仕事なはず)= XRは趣味です
  • 4. Ignite 2021でのAzure Object Anchorsの情報 2021/3/24 Copyright © 2021 Takahiro Miyaura Public Previewとして提供開始がアナウンス https://blogs.windows.com/japan/2021/03/05/driving-innovation-with-azure-mixed-reality-services/ Private Previewではトヨタ社での先行利用事例が有名 https://blogs.windows.com/japan/2020/09/27/mixed-reality-momentum-hololens-2-expands-globally-and-new-azure-service-launches/ Mixed Realityの活用を より広げることができる注目のサービス
  • 6. 空間情報の活用を支援するMixed Realityサービス 2021/3/24 Copyright © 2021 Takahiro Miyaura Azure サービスとOSSライブラリ World Locking Tool 現実空間とデジタル情報の 位置関係を高精度に維持  Azure Services  Azure Services  OSS Library パスタ状の仮想物体 Azure Spatial Anchors 現実空間をマーカーとして デジタル情報を位置合わせ Azure Object Anchors 現実の物体をマーカーとして デジタル情報を位置合わせ
  • 7. Azure Object Anchors 2021/3/24 Copyright © 2021 Takahiro Miyaura
  • 8. Azure Object Anchors 概要 2021/3/24 Copyright © 2021 Takahiro Miyaura 空間をスキャンし学習済みの形状と照合 HoloLensで認識している空間情報 =現実空間をスキャンし凹凸や奥行を把握 Azure Object Anchors  Azure Services 学習済み形状モデル HoloLens 2 ①空間スキャン ②空間情報取得 ③アンカー設置&可視化 [オプション]診断情報送信 Azure Object Anchors Runtime SDK ou ファイル インポート 取得 [事前作業] 現実の物体は要登録 APIで登録 3Dモデリング ツール等で作成 3Dモデル (参考)Azure Spatial Anchorsはスキャンし た空間情報を学習済み形状として活用
  • 9. ①空間スキャン ②空間情報取得 ③アンカー設置&可視化 Azure Object Anchors 利用について 2021/3/24 Copyright © 2021 Takahiro Miyaura 大きくは2段階の作業 HoloLensで認識している空間情報 =現実空間をスキャンし凹凸や奥行を把握 Azure Object Anchors  Azure Services 学習済み形状モデル HoloLens 2 3Dモデル APIで登録 3Dモデリング ツール等で作成 Azure Object Anchors Runtime SDK ou ファイル インポート 取得 [事前作業] 現実空間での利用 モデルの登録 (事前作業) [オプション]診断情報送信
  • 10. Azure Object Anchors 利用について – 現実オブジェクトの登録 2021/3/24 Copyright © 2021 Takahiro Miyaura 3DモデルとしてAzure Object Anchorsに登録 【現実オブジェクトは3Dモデルで用意】  フォーマット .glb, .gltf, .ply, .fbx, .obj  サイズは1m ~10m の範囲内がスイートスポット  適切なスケール ユニット  センチメートル, デシメートル, フィート, インチ, キロメートル, メートル, ミリメートル, ヤード,  オブジェクトの重力方向  例:オブジェクトの下向き-Y の場合は、(0, -1, 0) 【注意点】 サイズが大きく、LOD (詳細レベル) が高いモデルの処理には時間がかかる可能性あり。 Azure Object Anchorsの オブジェクト変換サービスを利用 • 学習済みモデルはouファイルとして取得 • HoloLensにインポート(ファイルコピー) Azure Object Anchors  Azure Services 学習済み形状モデル 3Dモデル APIで登録 3Dモデリング ツール等で作成 Azure Object Anchors Runtime SDK ou ファイル インポート 取得 [事前作業]
  • 11. Azure Object Anchors 利用について – 現実のオブジェクトの検出と可視化 2021/3/24 Copyright © 2021 Takahiro Miyaura 学習済みモデルと現実空間の情報を照合 HoloLensで認識している空間情報 =現実空間をスキャンし凹凸や奥行を把握 HoloLens 2 ①空間スキャン ②空間情報取得 ③アンカー設置&可視化 Azure Object Anchors Runtime SDK ObjectSearchArea  現実の物体を検出するエリア範囲 (動画の赤のボックス) MinSurfaceCoverage  現実の物体と一致したとみなす表面の 最小カバレッジ率 IsExpectedToBeStandingOnGroundPlane  現実オブジェクト床面に設置しているかどうか ExpectedMaxVerticalOrientationInDegrees  認識可能な上方向と重力の最大角度 MaxScaleChange  オブジェクトのスケールを調整(0~1) 検出時の主な調整項目
  • 12. Azure Object Anchors Quick Startのポイント  Quick Start通りで問題なく実施できます  3Dモデルも簡易な方法で試せます 2021/3/24 Copyright © 2021 Takahiro Miyaura
  • 13. Azure Object Anchors Quick Start のポイント 2021/3/24 Copyright © 2021 Takahiro Miyaura 実施の際のポイントを紹介 – モデルの生成  対象にするモデルを用意しましょう 【シンプルな形状を用意】  そこそこ大き目の物体(1m程度)を用意  バランスボール、段ボール等  対称形の物体は方向が不定になります(位置は正確に出ます) 【公式ドキュメント(Azure Object Anchors )】  全体:https://docs.microsoft.com/ja-jp/azure/object-anchors/  モデルの登録:https://docs.microsoft.com/ja-jp/azure/object-anchors/quickstarts/get-started-model-conversion  AOA利用:https://docs.microsoft.com/ja-jp/azure/object-anchors/quickstarts/get-started-unity-hololens-mrtk?tabs=unity-package-web-ui 実寸(m)で入力 Scale:1.0 Apply Scaling:FBX All 例:Blenderでバランスボール用のモデル生成  Quick Startのコンバージョンツールで登録  成功するとouファイルが生成されます。
  • 14. Azure Object Anchors Quick Start のポイント 2021/3/24 Copyright © 2021 Takahiro Miyaura 実施の際のポイントを紹介 – HoloLens アプリ 【公式ドキュメント(Azure Object Anchors )】  全体:https://docs.microsoft.com/ja-jp/azure/object-anchors/  モデルの登録:https://docs.microsoft.com/ja-jp/azure/object-anchors/quickstarts/get-started-model-conversion  AOA利用:https://docs.microsoft.com/ja-jp/azure/object-anchors/quickstarts/get-started-unity-hololens-mrtk?tabs=unity-package-web-ui 【Device Portal経由でインポート】  場所:User FoldersLocalAppData AOAMRTKApp.X.X.X.X_arm64__XXXXXLocalState
  • 15. Azure Object Anchors 実装の話  Quick Startのコードをちょっと紹介 2021/3/24 Copyright © 2021 Takahiro Miyaura
  • 16. Azure Object Anchors 実装の話 - モデル登録とOUファイルの取得  Quick Startのコードをちょっと紹介 2021/3/24 Copyright © 2021 Takahiro Miyaura
  • 17. Azure Object Anchors 実装の話 – モデル登録とOUファイルの取得 2021/3/24 Copyright © 2021 Takahiro Miyaura OUファイルの作成指示 ObjectAnchorsConversionClient client = new ObjectAnchorsConversionClient([AccountId], [AccountDomain], [AccountKey]); AssetConversionOperation conversionOperation = null; var assetOptions = new AssetConversionOptions( (await client.GetAssetUploadUriAsync()).Value.UploadUri, AssetFileType.FromFilePath(configuration.InputAssetPath), new Vector3(0.0f, -1.0f, 0.0f), AssetLengthUnit.Meters); conversionOperation = await client.StartAssetConversionAsync(assetOptions); Azure Object Anchorsの アカウントID、ドメイン、アカウントキー モデルデータアップロードURL (サイズが大きいので非同期用に都度変わる) 3Dモデルデータオブジェクト AssetFileTypeは読込んだモデルの種類などを情報に持つ モデルデータの重力方向軸 モデルデータのサイズ単位 Ouファイルの作成指示
  • 18. Azure Object Anchors 実装の話 – モデル登録とOUファイルの取得 2021/3/24 Copyright © 2021 Takahiro Miyaura OUファイルのダウンロード var response = await conversionOperation.WaitForCompletionAsync (new CancellationTokenSource(TimeSpan.FromMinutes(40)).Token); if (response.Value.ConversionStatus == AssetConversionStatus.Succeeded) //正常完了の場合 { BlobClient downloadBlobClient = new BlobClient(response.Value.OutputModelUri); await downloadBlobClient.DownloadToAsync(outputPath); } OUファイルの処理待ち OUファイルのダウンロード
  • 19. Azure Object Anchors 実装の話 – オブジェクトの検索と可視化  Quick Startのコードをちょっと紹介 2021/3/24 Copyright © 2021 Takahiro Miyaura
  • 20. Azure Object Anchors 実装の話 – オブジェクトの検出と可視化 2021/3/24 Copyright © 2021 Takahiro Miyaura |・ω・)b 絶賛調査中! そもそも説明時間足りないことに気づく・・・ 詳細はQiita記事を待ってて
  • 21. まとめ 2021/3/24 Copyright © 2021 Takahiro Miyaura
  • 22. まとめ 2021/3/24 Copyright © 2021 Takahiro Miyaura Azure Mixed Reality の新しいサービス Azure Object Anchors 3Dモデル形状を登録 現実空間から学習済モデルと一致する現実の物体を検索 現実の物体位置、向きを推定しデジタル情報と位置合わせ Azure Object Anchorsが加わった Azure Mixed Reality サービスでMixed Realityの活用範囲が広がる