動画へのAI技術適用の可能性です。メタデータ作成、映像から映像の作成におけるMicrosoftの最新AI技術にフォーカスします。エンドユーザー・開発者フォーカスのため、モデル作成については触れていません。

1. #azurejp
https://www.facebook.com/dahatake/
https://twitter.com/dahatake/
https://github.com/dahatake/
https://daiyuhatakeyama.wordpress.com/

3. AI for Media
あなたのメディアの価値の最大
化

5. 動画には「時間軸」がある!

8. Vision
Speech
Language
Face
画面上の文字
歴史的建造物
話している言葉
翻訳
話者
オブジェクト
シーン
感情
感情
感情キーワード

9. Language
Speech
Search
Machine
Learning
Knowledge Vision
Spell
check
Speech API
Entity linking
Recommendation
API
Bing
autosuggest
Computer
vision
Emotion
Forecasting
Text to
speech
Thumbnail
generation
Anomaly
detection
Custom
recognition
(CRIS)
Bing
image search
Web language
model
Customer
feedback
analysis
Academic
knowledge
OCR, tagging,
captioning
Sentiment
scoring
Bing
news search
Bing
web search
Text analytics
Cognitive Services APIs

10. Labs
Bing Web Search
Bing Autosuggest
Bing Image Search
Bing Video Search
Bing News Search
Bing Custom
Search
Search
Computer Vision
Emotion
Face
Video
Video Indexer
Custom Vision
Service
Vision
Bing Speech
Custom Speech
Service
Speaker
Recognition
Translator
Speech
Bing Spell Check
Linguistic Analysis
Language
Understanding
Text Analytics
Web Language
Model
Language
Academic
Knowledge
Entity Linking
Knowledge
Exploration
QnA Maker
Recommendations
Custom Decision
Service
Knowledge
microsoft.com/cognitive
Content
Moderator
Project Prague Nanjing Project Project Johannesburg
Project Cuzco Project Abu Dhabi Project Wollongong

11. Bing Web Search
Bing Autosuggest
Bing Image Search
Bing Video Search
Bing News Search
Bing Custom
Search
Search
Computer Vision
Emotion
Face
Video
Video Indexer
Custom Vision
Service
Vision
Bing Speech
Custom Speech
Service
Speaker
Recognition
Translator
Speech
Bing Spell Check
Linguistic Analysis
Language
Understanding
Text Analytics
Web Language
Model
Language
Academic
Knowledge
Entity Linking
Knowledge
Exploration
QnA Maker
Recommendations
Custom Decision
Service
Knowledge
Content
Moderator
Labs
Project Prague Nanjing Project Project Johannesburg
Project Cuzco Project Abu Dhabi Project Wollongongmicrosoft.com/cognitive

12. 独自データ
Your App

13. Interactive Big Data Processing
Image Video

14. Speech-to-
text
話しているテキストを
抽出
現在、8言語対応
Face &
Emotion
detection
顔のカウントおよび
性別・年齢・感情の判
定
Hyperlapse
スタビライザーとタイ
ムラプス
Video
summarizatio
n
ハイライトシーンによ
る
サマリービデオの自動
作成
Motion
detection
動きのあった箇所の検
知
Object
Character
Recognition
(OCR)
ビデオ内の画像から、
テキストを抽出
450 6th St.
San
Francisco
Face
Redaction
特定の人の顔に
ぼかしを入れる

15. Face redaction walkthrough:
https://docs.microsoft.com/ja-jp/azure/media-services/media-services-redactor-walkthrough

16. エン
コード 顔認識
サムネ
イル作
成
顔一致

19. Video Indexer

23. #azurejp

24. #azurejp

25. #azurejp

27. Asset Media Analytics
Encoding

28. http://amslabs.azurewebsites.net/index.html

29. 本情報の内容（添付文書、リンク先などを含む）は、
作成日時点でのものであり、予告なく変更される場合があります。

32. H.264
HLS
DASH
Azure Media Services
クラウド上に構築された
ビジネスで動画を活用するた
めの
VoD / Live 対応した
動画配信プラットフォーム
Azure Media Services

33. 付加価値を提供する
多くのパートナー
ソリューション
Streaming /
CDN
コンテンツ
保護
Processing取り込み
と保管
メディア 配信の コア 機能を
API として提供
Azure Media Services
PlayerAI
(Artificial
Intelligence)

34. Standards
and Guidelines
Cloud & Application
Security Guidelines
Content Protection
Standard
Cloud Controls
Matrix v3.0.1
Federation Against
Copyright Theft

36. Super Bowl XLIX
FIFA World Cup Olympic Games

38. “Powered by”
SI / ISV 議会中継

39. Azure Media Services の役割
• アップロード から CDN までのメディア配信の コア機能とインフ
ラ を API 提供
• ビルドイン パートナーサービスも含めた、SLA と サポート
39
Ad
Insertion
Contents Management System (CMS) Analytics
Player

40. Processing
• 同時ジョブ実行に柔軟にスケールアウト
• 使用量に応じた課金
• 突発的な事象への対応がしやすい
• 一般的な、Web/放送局/スタジオに必要な品質のビデオ・オーディオ
に対応
• 取り込み: MXF, Apple ProRes, MPEG2 TS など
• 出力: H.264 SD/HD video, Dolby Digital/AC3, Dolby Digital+, AAC-LC ,
HE, 多言語音声, クローズドキャプション
• H.265 HEVC/UHD 4K – Private Preview

41. エンコーダーからの出力 AMS Standard
Encoder
AMS Premium
Encoder
SD /1,280 x 720未満 1.53円 3.57円
HD /1,280 x 720
– 1,920 x 1,080
2x 2x
UHD / 1,920 x 1,080 以上
(最大 4,960 x 2,160)
4x 4x
音声/分 (1/4)x (1/4)x
Processing
https://azure.microsoft.com/en-us/blog/encoding-with-media-services-everything-you-need-
to-know-about-new-pricing-model/
Layer Resolution Multiplier
HD Video 1 1920x1080 2x
HD Video 2 1920x1080 2x
HD Video 3 1280x720 2x
SD Video 1 960x540 1x
SD Video 2 960x540 1x
SD Video 3 640x360 1x
SD Video 4 640x360 1x
SD Video 5 320x180 1x
Audio N/A 0.25x
Total 11.25x

42. コンテンツ
保護

43. Streaming /
CDN

44. Player
• 全てのデバイスのためをカバーするPlayers
• HTML / JavaScript / CSS
• 必要であれば、Flash / Silverlight へフォールバック
• OSを検知し、最適な再生プロトコル、暗号化/DRMを自動判
断
• 自身のWeb/Mobileサイトへ埋め込み
• http://aka.ms/ampdemo