よわよわPCによる姿勢推定 -PoseNet-

よわよわPCによる姿勢推定
公立はこだて未来大学
システム情報科学部複雑系知能学科
B4 森雄斗
未来大×企業エンジニア春のLT大会 2019

自己紹介
▷ 森雄斗
○ Tmori. ( @bannerforest)
▷ 学部4年
▷ 興味: AI, センサデータ, スマスピ
▷ 初LT

姿勢推定って何？
Pose estimation

姿勢推定
▷ カメラの映像から
人の骨格（姿勢）がわかる！
https://github.com/ZheC/Realtime_Multi-Person_Pose_Estimation/blob/master/readme/shake.gif

数年前まで…
デプスセンサ
ex: kinect
GPU(グラフィックボード)
ex: GeForce GTX ~

現在
▷ AI技術の発展により
一般的なPCとWebカメラがあれば
姿勢推定ができる

姿勢推定分野で
超有名なライブラリ

OpenPose
▷ 単眼カメラの映像からリアルタイムで
人の骨格（姿勢）が検出できるライブラリ
▷ GPU版(オリジナル), CPU版
▷ Python, Unity
https://github.com/CMU-Perceptual-Computing-Lab/openpose

しかし
問題点もある！

OpenPoseの問題点
▷ 企業の方目線（想像）
○ 商用利用は有償
○ スポーツ領域は商用利用に関係なく不可
▷ 学生の方目線
○ プログラム初学者だと導入難易度高め
○ マシンパワーの不足（CPU版）
■ 8GB以上のメモリ、8コア以上のCPU
https://flintbox.com/public/project/47343/
https://github.com/CMU-Perceptual-Computing-
Lab/openpose/blob/master/doc/installation.md

そこで今回は
PCスペックが低くても
簡単に実行・開発できる
姿勢推定をご紹介！！

「これだけは伝えておきたい技術」
PoseNet
https://github.com/tensorflow/tfjs-models/tree/master/posenet

PoseNetのここがすごい！
webカメラの映像からリアルタイムかつ
Webブラウザで人の姿勢が検出できる

ライセンス
Apache License 2.0
http://www.apache.org/licenses/LICENSE-2.0

公式がリアルタイムデモを公開
Webカメラだけで実行可能
https://storage.googleapis.com/tfjs-models/demos/posenet/camera.html

入門PoseNet
（時間の都合で静止画ver）
https://github.com/tensorflow/tfjs-models/tree/master/posenet

入門PoseNet（静止画ver）
1. 画像を用意
「ぱくたそ」さんの
俺はいいけど肉まんはなんてい
うかな？のフリー画像（写真）
https://www.pakutaso.com/20181219337post-18845.html

2. TensorFlow.jsとPoseNetのモデルを読み込み
man.jpg

3. htmlで画像表示して、script(JS)に受け渡し
man.jpg

4. ロードしたモデルを適用し、コンソールに出力
man.jpg

5. ローカルサーバを立てて、Consoleを確認
※ htmlのローカル起動だとposenetの出力のみ（DOM関連のエラーで画像表示なし）
ex:

入門PoseNetのデータチェッ
ク
パーツの
座標はここ！
パーツは
全17種類

入門PoseNetのデータチェッ
ク

リアルタイム
デモへ
https://github.com/YutoMori/posenetForFunLT

ご清聴ありがとうございました
Thank you for listening

よわよわPCによる姿勢推定 -PoseNet-

Recommended

Recommended

More Related Content

What's hot

What's hot (20)

Similar to よわよわPCによる姿勢推定 -PoseNet-

Similar to よわよわPCによる姿勢推定 -PoseNet- (20)

よわよわPCによる姿勢推定 -PoseNet-

Editor's Notes