2016年5月26日に行われた「IBM Watson Summit 2016」において、Bluemixユーザーグループ LTで発表した「IBM Bluemix + Watson(MS) + Eagle Eye で行う表情認識システム」の資料です。 発表者：株式会社イグアス 大塚 将由

1. Copyright 2016 iGUAZU Corporation
2016年5月26日 株式会社イグアス
テクニカル＆クラウド事業部
テクニカル推進部
大塚 将由
Emotion Recognition with Bluemix, Watson(MS),
Eagle Eye and Intelligent IP Camera
IBM Bluemix + Watson(MS) + Eagle Eyeで行う
表情認識システム

2. と言っても実際に使えますので、
ご興味あるかたはご連絡ください。
m_ootsuka@i-guazu.co.jp
システムとか言っておりますが、
これは製品ではなく、
あくまで「コンセプトデモ」です。
1

3. Copyright 2016 iGUAZU Corporation
J Bグループ・関連会社
[持株会社]
社名 J B C C ホールディングス株式会社
売上高 919億円（2014年度）
グループ従業員数 2,474名（有期社員を含む）※2015年10月1日時点
上場証券取引所 東京証券取引所 市場第一部（証券コード 9889）
[事業会社]
情報ソリューション
ディストリビューション 製品開発製造 シェアード・サービス
サービス 研修サービス マーケティング
海外
中国（上海） タイ シンガポール 中国 オフショア
※連結決算対象に含めない関連会社です。
※2016年4月1日現在
2

4. Copyright 2016 iGUAZU Corporation
イグアスの事業概要
ディストリビューション事業
全国のお客さま（パートナー様）に、必要な製品、
サービスを豊富な品揃えでご提供いたします。
さらに、プロフェッショナルな人材が、イグアス
ならではの様々なご支援をお届けいたします。
サプライ事業
ＩＴサプライ用品、ＰＣバッグなどをＥＣサイト
を通じてご提供いたします。
低価格で高品質なリサイクルバッテリーも取り扱
っています。
３Ｄプリンター事業
米国３Ｄ Systems社の最先端の３Ｄプリンターや
３Ｄスキャナー、ソフトウェアをフルラインナップ
でご提供。また、機器を確認できるショールームを
開設し、保守サービスは全国対応をしています。
3

5. Copyright 2016 iGUAZU Corporation
自己紹介
名前： 大塚 将由（まさよし）
所属： 株式会社イグアス
テクニカル＆クラウド事業部
テクニカル推進部
職種： プリセールスエンジニア
担当： 主にEagle EyeとIoT関連
成分： インフラSE（8年分）
マネージャ（2年分）
プリセールス（8年分）
アナリティクス（3年分）
Bluemix + IPカメラ（1年分）
昔はゲームの3Dグラフィックを
担当しておりました…
4

6. IPカメラを使用して年齢、性別、
そして表情を「自動的に」読み取って、
顔属性データをDB等に蓄積し、
レポーティングできること
表情認識システムの目的
5

7. • 極力Bluemix内のサービスや外部のRESTful
なサービスを使用して構築すること
• OpenCVとかを使ったゴリゴリの画像分析
を行わないこと
• 極力コードを書かずに、誰でも簡単にシ
ステムを組めること
表情認識システムのコンセプト
6

8. Copyright 2016 iGUAZU Corporation
表情認識システムの概要
7

9. Copyright 2016 iGUAZU Corporation
出来上がったものがこちら
8

10. Copyright 2016 iGUAZU Corporation
表情認識システムの構成
IBM Bluemix
Experience
Cloudant
Experience
Entrance
node.jsnode-red
Emotion API
Face API
Object
Storage
AlchemyAPI
Entrance
9

11. Copyright 2016 iGUAZU Corporation
①カメラによる顔画像の取得と送信
Experience
Experience
Entrance
Entrance
DINION IP ultra 8000 MP
Dropboxに登録された顔画像
切り出された写真
切り出された写真
10

12. Copyright 2016 iGUAZU Corporation
②カメラのよる動画の取得
Experience
Experience
Entrance
Entrance
DINION IP ultra 8000 MP
Eagle Eye Networks
録画管理画面
11

13. Copyright 2016 iGUAZU Corporation
③各Cognitive Serviceによる顔情報の認識
IBM Bluemix
node.jsnode-red
Emotion API
Face API
AlchemyAPI
IBM Watson (Alchemy API)
を使用した画像認識の例
"faceAttributes": {
"age": 31.3,
"gender": "male",
"headPose": {
"roll": -18.9,
"yaw": -21.7,
"pitch": 0
},
"smile": 1,
"facialHair": {
"moustache": 0.2,
"beard": 0.1,
"sideburns": 0.2
},
"glasses": "NoGlasses"
}
"faceAttributes": {
"age": 27.8,
"gender": "female",
"headPose": {
"roll": -8.7,
"yaw": 6.4,
"pitch": 0
},
"smile": 1,
"facialHair": {
"moustache": 0,
"beard": 0,
"sideburns": 0
},
"glasses": "NoGlasses"
}
"faceAttributes": {
"age": 7.4,
"gender": "male",
"headPose": {
"roll": 3.3,
"yaw": 2,
"pitch": 0
},
"smile": 0.155,
"facialHair": {
"moustache": 0,
"beard": 0,
"sideburns": 0
},
"glasses": "NoGlasses"
}
"faceAttributes": {
"age": 4,
"gender": "female",
"headPose": {
"roll": -19.6,
"yaw": 1.3,
"pitch": 0
},
"smile": 0.471,
"facialHair": {
"moustache": 0,
"beard": 0,
"sideburns": 0
},
"glasses": "NoGlasses"
}
Microsoft Cognitive Services
(Face API)を使用した画像認識の例
Watson + Face APIを使用した
表情認識システムの出力例
12

14. Copyright 2016 iGUAZU Corporation
④認識結果のCloudantへの保存
{
"_id": "ae1d77e363fda7e93462dbeb0a986bff",
"_rev": "1-0c782dfddbc7ee7dcbbef8f567c46979",
"path": "/apps/bosch/2016-04-20_17_30_33id3094.jpeg",
"time": "2016/04/20 17:30:33",
“image”: “data:image/jpeg;base64,<base64 binary>,
"age": 43.5,
"gender": "男性",
"smile": 38.8
}
Formatted and Cleansing
JSON Document
"faceAttributes": {
"age": 4,
"gender": "female",
"headPose": {
"roll": -19.6,
"yaw": 1.3,
"pitch": 0
},
"smile": 0.471,
"facialHair": {
"moustache": 0,
"beard": 0,
"sideburns": 0
},
"glasses": "NoGlasses"
}
Cloudant
Data processing
by Node-RED
‘POST’ to
Alchemy, Face API
Binary Buffer of
Face Image
JSON Response
with
‘Face Attributes’
13

15. Copyright 2016 iGUAZU Corporation
⑥Eagle Eyeからの動画の取得
Eagle Eye
動画再生画面
ダウンロード
したり・・・
長期保存用に
Object Storageへ退避
14

16. Copyright 2016 iGUAZU Corporation
⑦Cloud9chartsによるグラフ、レポート表示
Cloudant Native対応で
結構便利です・・・
15

17. Bluemixを使ってよかったこと
Watson(AlchemyAPI)を使ってよかったこと
まとめ
なんだかんだでNode-REDはやっぱり便利
アイコン一つで簡単Cognitive
16

18. Eagle EyeのLive View
＋
OpenWhiskでDark Vision
（のパクリ）
（もしかするとOpenCVも？）
次にやりたいこと
17

19. Copyright 2016 iGUAZU Corporation
Node-REDの画面（おまけ）
18

20. ご清聴ありがとうございました。
BOSCHは、ドイツ Robert Bosch GmbH およびその関連会社の商標です
Microsoft は、米国 Microsoft Corporation およびその関連会社の商標です
IBMは、米国 IBM Corporation およびその関連会社の商標です
DropBoxは、米国 DropBox, Inc. およびその関連会社の商標です
Eagle Eyeは、米国 Eagle Eye Networks およびその関連会社の商標です
Clod9chartsは、米国 Cloud9charts およびその関連会社の商標です
各製品名、商標、ロゴ等は全て保持企業に帰属します 19