IVS CTO Night & Day 2016 Tech Talk - AI

1. CTO Tech Talks
AI - Artificial Intelligence

2. ⾃⼰紹介
• 名前
– 榎並 利晃（えなみ としあき）
– toshiake@amazon.co.jp
• 役割
– Mobile & IoT Business Development Manager
• 好きなAWSのサービス
– AWS IoT
– Mobile Services
– Amazon Kinesis Family

3. AIの基礎
© 2016, Amazon Web Services, Inc. or its Affiliates. All rights reserved.
3

4. AIとIoTの関係
IoTで⽣成された⼤量かつ構造・⾮構造のデータ
から意味のある形に変えるのにAIの技術（識別・
判断）を利⽤する。
© 2016, Amazon Web Services, Inc. or its Affiliates. All rights reserved.
4
よくあるケース
異常検知、故障予測、画像認識、異⾳・異常振動検知・⾳声認識、⾔語理解

5. 歴史は古い
© 2016, Amazon Web Services, Inc. or its Affiliates. All rights reserved.
5
http://biography.sophia-
it.com/content/%E3%82%B8%E3%83%A7%E3%83%B3%E3%83%BB%E3%83%9E%E3%8
3%83%E3%82%AB%E3%83%BC%E3%82%B7%E3%83%BC
John McCarthy
⼈⼯知能は、1956年にダートマス会議で
ジョン・マッカーシーにより命名された

6. © 2016, Amazon Web Services, Inc. or its Affiliates. All rights reserved.
2017年に注⽬すべき戦略的テクノロジ・トレンドのトップ10
https://www.gartner.co.jp/press/html/pr20161031-01.html
1.⾼度な機械学習とAI
2. インテリジェントなアプリ
3. インテリジェントなモノ
4. 仮想現実と拡張現実
5. デジタルツイン
6. ブロックチェーンと分散型台帳
7. 会話型システム
8. メッシュのアプリ＆サービスアーキテクチャ
9. デジタルテクノロジープラットフォーム
10.アダプティブセキュリティアーキテクチャ

7. AIによって仕事が奪われる不安を感じるべき10の理由
1. 現在では、基幹作業を担える⾃動システムがある
2. ⼈やものとの接触があまりなければ⾃動化される
3. 内容を伝えるだけの仕事は⾃動化される
4. 複雑でない内容の分析は、⾃動化される
5. データをもとに疑問に応える仕事は⾃動化される
6. 計量分析は⾃動化される
7. コンピュータ上でシミュレーションできる仕事は⾃動化される
8. 機械は動作が⼀環している
9. データに基づいた解説や説明は⾃動化される
10. 明確な秩序だったルールがある仕事は⾃動化される
7
「AI時代の勝者と敗者」
トーマス・H・ダベンポート (著), ジュリア・カービー (著)

8. 認知テクノロジーの種類とその進化
作業の種類 ⼈間⽀援 反復作業の⾃動化 状況の認識・学習 ⾃⼰を認識し
た知性
数値分析 BI, 視覚化 作業分析、採点、
モデル管理
機械学習、ニューラ
ルネットワーク
未開発 最⾼融合
機械
⾔葉や画像の
理解
⽂字や⾳声の認識 画像認識、マシン
ビジョン
⾃然⾔語処理 未開発
デジタル作業
の遂⾏
ビジネスプロセス
管理
ルールエンジン、
プロセス・オート
メーション
未開発 未開発
物理的作業の
進⾏
遠隔操作 産業ロボット 完全⾃律ロボット、
⾃動運転⾞
未開発
「AI時代の勝者と敗者」
トーマス・H・ダベンポート (著), ジュリア・カービー (著)

9. AIを⽀える技術
© 2016, Amazon Web Services, Inc. or its Affiliates. All rights reserved.
9

10. ⼈⼯知能(AI)と機械学習(Machine Learning)
• ⼈⼯知能とは
– コンピューターシステムに⼈間と同様の知能を持たせるための取り組み
– 強いAIと弱いAI
• 強いAI
– ⼈間の知能と同等またはそれを超えるようなコンピューターシステム
• 弱いAI
– 特定の分野の問題解決や推論を⾏うソフトウェアの実装や研究
– ⼈⼯知能の主な研究分野
• 基礎寄り
– 推論、探索、画像認識、⾳声認識、⾃然⾔語処理、ゲーム理論、感性処理
• 応⽤寄り
– プランニング、エキスパートシステム、データマイニング、情報検索、マルチ
エージェント、ロボティクス、遺伝アルゴリズム
10
現在実現出来て
いるのはこちら

11. ⼈⼯知能(AI)と機械学習(Machine Learning)
• 機械学習とは
– (⼤量の)データを”学習”し、特定の事象についての知⾒(モデル)を獲得して、判断や予測を⾏うた
めのアルゴリズムとその実装
• データの真の分布を推定し、ルールを導出する
• それ⾃⾝が⼈⼯知能の分野と位置づけられることもあるが、⼈⼯知能を実現するためのアプローチ
として利⽤されることが多い
– 例)
データマイニング＝データベース＋機械学習
画像認識におけるCNN
– 代表的な機械学習アルゴリズム
• 線形回帰
• ロジスティック回帰
• k近傍法
• 決定⽊
• サポートベクトルマシン
• ニューラルネットワーク※
• ランダムフォレスト
• クラスタリング
11
Machine
Learning
最適化と
コントロール
ニューロサ
イエンスと
ニューラル
ネットワーク
統計的モデ
リング
情報理論
※ニューラルネットを機械学習の一部と取るか独立したものと
考えるかは人によって異なります。

12. ⼈⼯知能関連テクノロジー
機械学習
その他
ニューラルネットワーク
ディープラーニング その他
• 機械学習
⼤量のデータを読み込む、その内容を学習しコンピュータが⾃動で判断できる様にする。⼤容
量のデータ処理という観点でクラウドとの相性が良い
• ディープラーニング
⼈間と似た⽅法で学習するニューラルネットワークの仕組みと機械学習の仕組みを組み合わせ
たもの

13. ニューラルネットとDeep Learning
• ニューラルネットの栄枯盛衰
– ⼈間の神経組織(ニューロン)をモデル化した学習器
– ⼗分なノード数の中間層があれば、３層ニューラルネットであらゆる関数を近似で
きる
– 誤差逆伝播法の確⽴
– 様々な要素によって⼀時的に衰退
• 次元の呪いによる計算量爆発
• 誤差消失問題と局所収束問題
• SVM等局所収束の無い学習器の登場
• Deep Learningの隆盛
– CNN、DBM、DBN等４層以上でも学習が可能なアルゴリズムの登場
– 画像認識において顕著な実績
– ⾃然⾔語処理への応⽤
– 計算機能⼒の⼤幅な向上＋GPUの活⽤
– クラウドとビッグデータ
– 豊富なライブラリ
1960
y
x0
x1
x2
2012
パーセプトロン
多層NN
19８0
誤差逆伝播法
2006
ILSVRCにおいてCNNで大差での優勝
ボルツマンマシンを用いた
深層自己符号化器
SVM等他のアルゴリズムが隆盛
YouTubeの動画から猫の画像の認識

14. AWSでは、One-Click GPU Deep Learning
AWS Deep Learning AMI
Up to~40k CUDA cores
MXNet
TensorFlow
Theano
Caffe
Torch
Pre-configured CUDA drivers
Anaconda, Python3
+ CloudFormation template
+ Container Image
Deep Learning Frameworkの普及

15. MXNet | Scalable Deep Learning
§ Open Source: Apache-2 Licensed Deep Learning Framework
§ Founded by: U.Washington, Carnegie Mellon U.
§ State of the Art Model Support: Convolutional Neural Networks (CNN),
Long Short-Term Memory (LSTM)
§ Ultra-scalable: Near-linear scaling equals fastest time to model
§ Multi-language: Support for Scala, Python, R, etc.. for legacy code leverage
and easy integration with Spark
§ Ecosystem: Vibrant community from Academia and Industry

16. 機械学習における重要なポイント­1
• ノーフリーランチ定理
– コスト関数の局地を探索するあらゆるアルゴリズムは全ての可能なコスト関数に適⽤した
結果を平均すると同じ性能となる
• 全ての問題に適したアルゴリズムは、特定の問題に特化したアルゴリズムよりも性能が良く
ない
– 問題に適したアルゴリズムを選択する必要がある
• 汎化能⼒
– 学習したモデルが真の分布に近い事が望ましい(過学習に陥っていない)
• トレーニングデータが多ければ多いほど真の分布に近づくが、その分学習が遅くなる
• 計算量
– ⼀般的に取り扱うデータは多次元
• モデルの学習には⼤規模な⾏列演算が必要
• 分散処理による並列計算
– 基本はトライ＆エラー
• 選択したアルゴリズム毎に、解きたい問題に最適なパラメーターを調整し、繰り返しモデル
を作成する必要がある
(NNの層の数、活性化関数の種類、層ごとのノード数、重みの変化量、etc.)
– 現実的な時間で学習が完了するモデルを選定する必要がある

17. 機械学習における重要なポイント­2
• トレーニングデータが正確であり、解きたい問題と適⽤
するアルゴリズムに適した特徴が含まれている
• 特徴量の抽出(⼊⼒次元の削減)
– 特徴量が増えると計算量が爆発する
• より良い内部表現を得るための次元削減を⾏う事が多い
– より良い特徴抽出に求められる要件
• 元の情報量を出来るだけ保持している
• 個々の特徴同⼠ができるだけ独⽴している
• ロバスト性を持っている(変動に左右されない)

18. AIの応⽤例
© 2016, Amazon Web Services, Inc. or its Affiliates. All rights reserved.
18

19. Amazon Rekognition
ディープラーニングを利⽤
した画像認識サービス
状況&物体の認識
表情の解析
顔の⽐較と認識
Amazon Polly
フルマネージド型の”Text-
to-speech” サービス
• APIを利⽤して⽂章をPollyに渡す
と⾳声ストリームまたはファイル
の形式で⾳声化
• ⽇本語を含む24の⾔語、47種類
の⾳声（男性、⼥性）に対応
Amazon Lex
⾳声認識・アプリケー
ション実⾏サービス
⾳声認識、⾔語解析を⾏い、
⾔語の意味に基づいてアプ
リケーションを実⾏

21. Amazon Go
How does Amazon Go work?
Our checkout-free shopping experience is made possible by the same types of
technologies used in self-driving cars: computer vision, sensor fusion, and
deep learning. Our Just Walk Out technology automatically detects when
products are taken from or returned to the shelves and keeps track of them in a
virtual cart. When you’re done shopping, you can just leave the store. Shortly
after, we’ll charge your Amazon account and send you a receipt.