Kinect Camp with TMCNの資料です

1. Kinect SDK v2の
応用機能を使った事例
2015/06/06
中村 薫

2. 自己紹介
中村 薫
フリーランスで主にDepthセンサー系の仕事をしています
アプリケーション開発
講演、ハンズオンセミナー
執筆など
Microsoft MVP for Kinect for Windows
http://www.naturalsoftware.jp/
kaorun55@naturalsoftware.jp
Copyright © 2015 Natural Software All rights reserved. 2

3. Copyright © 2015 Natural Software All rights reserved. 3

4. Copyright © 2015 Natural Software All rights reserved. 4

5. Kinect SDK v2の応用機能
•Face
•HD Face
•Kinect Fusion
•Gesture
Copyright © 2015 Natural Software All rights reserved. 5

6. Kinect SDK v2の応用機能
•Face
•HD Face
•Kinect Fusion
•Gesture
Copyright © 2015 Natural Software All rights reserved.
今日の事例
6

7. HD Face
CTスキャンされた自分の顔を動かす
Copyright © 2015 Natural Software All rights reserved. 7

8. Copyright © 2015 Natural Software All rights reserved. 8

9. ソフトウェア構成
Copyright © 2015 Natural Software All rights reserved. 9

10. HD Face
•1347の顔特徴点を検出
•顔の角度を検出
Copyright © 2015 Natural Software All rights reserved. 11

11. PCL(Point Cloud Library)
•3次元の点の集まりを処理するライブラリ
•OpenCVの3次元版
http://pointclouds.org/
Copyright © 2015 Natural Software All rights reserved. 12

12. 3DモデルとHD Faceの位置合わせ
Copyright © 2015 Natural Software All rights reserved. 13

13. 3Dモデルを動かす
Copyright © 2015 Natural Software All rights reserved.
https://www.youtube.com/watch?v=KVhdJgnPak4
14

14. Kinect Fusion
3Dスキャンして3Dプリンターで出力する
Copyright © 2015 Natural Software All rights reserved. 15

15. 3Dプリントの課題
•何をプリントするのか？
• 3Dモデル
•3Dモデルはどこから調達するのか
• 3Dモデルサイトからダウンロードする
• 自分でモデリングする
•モデリングには技量が必要
•センサーでスキャンできない？
Copyright © 2015 Natural Software All rights reserved. 16

16. やってみました
Copyright © 2015 Natural Software All rights reserved. 17

17. 流れ
• Kinect Fusionで3Dスキャン
• 3Dプリンタで出力する
Copyright © 2015 Natural Software All rights reserved. 18

18. 配置
Copyright © 2015 Natural Software All rights reserved. 19

19. スキャン@Kinect Fusion
Copyright © 2015 Natural Software All rights reserved. 20

20. モデル出力
Copyright © 2015 Natural Software All rights reserved. 21

21. モデル出力
穴があるとプリント
できない
Copyright © 2015 Natural Software All rights reserved. 22

22. 穴埋め@3D Builder
Copyright © 2015 Natural Software All rights reserved.
穴が開いている
23

23. 穴埋め@3D Builder
穴が埋まった
Copyright © 2015 Natural Software All rights reserved. 24

24. 3Dプリント
Copyright © 2015 Natural Software All rights reserved. 25

25. 余談(Intel RealSense)
Copyright © 2015 Natural Software All rights reserved. 26

26. 余談(Intel RealSense)
Copyright © 2015 Natural Software All rights reserved. 27

27. 余談(Intel RealSense)
Copyright © 2015 Natural Software All rights reserved. 28

28. www.naturalsoftware.jp
Copyright © 2015 Natural Software All rights reserved. 29