Successfully reported this slideshow.
We use your LinkedIn profile and activity data to personalize ads and to show you more relevant ads. You can change your ad preferences anytime.

RGB深度センサーの利用シーンについて

12,943 views

Published on

2017/08/10に行われた「Xtion 2 新製品発表会」の登壇資料です。
http://www.tekwind.co.jp/information/ASU/entry_642.php

Published in: Technology
  • Be the first to comment

RGB深度センサーの利用シーンについて

  1. 1. RGB深度センサーの 利用シーンについて 2017/08/09@Xtion 2 新製品発表会 株式会社ホロラボ/TMCN 中村 薫 HoloLab Inc.
  2. 2. 会社概要 株式会社ホロラボ(HoloLab Inc.) http://hololab.co.jp/ HoloLens/Windows Mixed Realityに関する • アプリケーション開発 • コンサルティング、ディレクション • セミナー、トレーニング • 普及啓もう活動(コミュニティ) HoloLab Inc.
  3. 3. 自己紹介 中村 薫 株式会社ホロラボ 代表取締役CEO • HoloLens/Windows Holographicに特化した会社です • KinectなどDepthセンサーの仕事も継続しています • アプリケーション開発、講演、ハンズオンセミナー、執筆など Microsoft MVP for Windows Development(Apr 2016 - Mar 2017) Microsoft MVP for Kinect for Windows (Apr 2014 - Mar 2016) Microsoft MVP for Visual Studio ALM (Apr 2012 - Mar 2014) http://www.naturalsoftware.jp/ HoloLab Inc.
  4. 4. TMCN • TMCN(Tokyo MotionControl Network) • https://www.facebook.com/TokyoMotioncontrolNetwork/ • https://tmcn.doorkeeper.jp/ HoloLab Inc.
  5. 5. RGB深度センサーの概要 HoloLab Inc.
  6. 6. RGB深度センサーの概要 • RGB深度センサーとは、RGB(カラー)画像のほかに距離や距離 画像を取得できるセンサー全般 • 距離が取れるため色で判別しにくい検出ができる • 2次元の画像だけでなく、3次元データ(点群)もできる • 多くのデバイスで距離はIR(赤外線)で計測するので、赤外線画 像も使える HoloLab Inc.
  7. 7. RGB深度センサーの種類 Kinect v1 Kinect v2 Leap Motion HoloLab Inc. Structure Sensor Xtion Xtion 2 Intel RealSense (中距離) Intel RealSense (近距離)
  8. 8. RGB深度センサーの種類 Kinect v1 Kinect v2 Leap Motion HoloLab Inc. Structure Sensor Xtion Xtion 2 Intel RealSense (中距離) Intel RealSense (近距離)
  9. 9. RGB深度センサー年表 2011 2012 2013 2014 2015 2016 2017 Xtion Xtion2 Kinect v1 Kinect v2 RealSense Structure Sensor Leap Motion HoloLab Inc.
  10. 10. RGB深度センサー仕様比較 Xtion2 Kinect v2 RealSense (短距離:SR300) RealSense (中距離:R200) RGB画像解像度 2592x1944/15 1920x1080/30 1280x 720/60 1920x1080/30 1920x1080/30 1920x1080/30 深度画像解像度 640x480/30 512 x 424/30 640x480/30 640x480/30 センシング方式 ToF ToF パターン IRステレオ 深度計測範囲 0.8m ~ 3.5m 0.5m ~ 4.5m 0.2m ~ 1.5m 0.4m ~ 2.8m 電源 USB バスパワー 外部電源 USB バスパワー USB バスパワー 対応OS Windows Linux Windows Windows Linux(※) Mac OS X(※) Windows Linux(※) Mac OS X(※) HoloLab Inc. https://www.intel.com/content/dam/support/us/en/documents/emerging-technologies/intel-realsense-technology/realsense-sr300-datasheet1-0.pdf https://software.intel.com/sites/default/files/managed/d7/a9/realsense-camera-r200-product-datasheet.pdf ※:librealsense(https://github.com/IntelRealSense/librealsense)を使用
  11. 11. Xtion2の特長 HoloLab Inc.
  12. 12. Xtion2の特長 • OpenNI1およびOpenNI2互換のため既存の資産を使いやすい • NiTE2によってKinectのような骨格推定もできる • WindowsとROSに対応している • コンパクト、バスパワー(USB給電) • 縦型の設置対応 HoloLab Inc.
  13. 13. センサーサイズ比較 HoloLab Inc.
  14. 14. 縦型設置対応 HoloLab Inc.
  15. 15. OpenNI2の概要 HoloLab Inc.
  16. 16. OpenNI2の概要 • 2012年にリリースされた、オープンソースのRGB深度センサー 用ライブラリ • 2014年にApple社によるPrimeSense社買収によってクローズ • StructureSensorのOccipital社によってメンテナンス • ソフトウェアドライバによってさまざまな深度センサーに対応 • RGB画像、Depth画像、IR(赤外線)画像を取得できる • PCL(Point Cloud Library)によって3D点群を取得できる • 精度については改善の余地あり HoloLab Inc.
  17. 17. OpenNI2の概要 HoloLab Inc. ドライバ デバイスドライバ (Xtion2) ミドルウェア 抽象化層 API ドライバ コア デバイスドライバ (Kinect v2) … … アプリケーション
  18. 18. OpenNI2の機能 Color Stream Depth Stream Point Cloud https://github.com/OpenNI2-Book/openni2bookHoloLab Inc. IR Stream
  19. 19. NiTE2概要 • OpenNI2とアプリケーションの間に入るミドルウェア • 骨格推定やポーズ推定などを行う • NiTE2の使用はデバイスに制限がある HoloLab Inc.
  20. 20. NiTE2の概要 HoloLab Inc. ドライバ デバイスドライバ (Xtion2) ミドルウェア 抽象化層 API ドライバ コア デバイスドライバ (Kinect v2) … … アプリケーション
  21. 21. NiTE2の機能 PoseUser Tracking Skeleton Tracking Gesture HoloLab Inc. Hand Tracking https://github.com/OpenNI2-Book/openni2book
  22. 22. 事例 HoloLab Inc.
  23. 23. 利用シーン HoloLab Inc. http://www.tekwind.co.jp/products/ASU/entry_13528.php
  24. 24. Microsoft Kinectでの事例 HoloLab Inc.
  25. 25. 医療 http://www.youtube.com/watch?v=624N3-nIieIHoloLab Inc.
  26. 26. HoloLab Inc.
  27. 27. 空中ディスプレイ HoloLab Inc.
  28. 28. 現実世界へのインタラクション 階段+マッピング+Kinect http://www.youtube.com/watch?v=h8wZnY_jWF8HoloLab Inc.
  29. 29. Kinectコンテストから HoloLab Inc. http://k4wa.com/
  30. 30. 非接触バイタルセンシング HoloLab Inc. http://monoist.atmarkit.co.jp/mn/articles/1310/02/news063.html
  31. 31. 高齢者遠隔運動指導・管理モデルRehAct HoloLab Inc. http://monoist.atmarkit.co.jp/mn/articles/1310/02/news063_2.html
  32. 32. Intel RealSenseでの事例 HoloLab Inc.
  33. 33. HoloLab Inc. https://www.intel.co.jp/content/www/jp/ja/architecture-and-technology/realsense-overview.html https://newsroom.intel.com/press-kits/realsense/
  34. 34. 組み込み HoloLab Inc. https://newsroom.intel.com/press-kits/realsense/
  35. 35. ドローン HoloLab Inc. https://www.intel.co.jp/content/www/jp/ja/architecture-and-technology/realsense-overview.html
  36. 36. VR(Virtual Reality) HoloLab Inc. https://newsroom.intel.com/press-kits/realsense/
  37. 37. ロボット HoloLab Inc. https://www.intel.co.jp/content/www/jp/ja/architecture-and-technology/realsense-overview.html
  38. 38. 3Dスキャン HoloLab Inc. https://www.intel.co.jp/content/www/jp/ja/architecture-and-technology/realsense-overview.html
  39. 39. まとめ HoloLab Inc.
  40. 40. まとめ • よりオープンなセンサーアプリ開発環境が復活 • OpenNI2およびNiTE2により既存資産の活用が可能 • ROS対応によりロボットなどへの搭載がより容易に • 事例はKinectやRealSenseなどにより豊富に存在 HoloLab Inc.
  41. 41. hololab.co.jp HoloLab Inc.

×