DBP-013_Cortana Intelligence に切り込む! ～未来予測の仕組みと実装～

1. ROOM
D

12. バッファつきの
データ入力
Microsoft Account
Purchases
$1.00 Halo Spartan Assault
$1.00 Halo Spartan Assault
ホットストア
保存・蓄積
分析用ストア
抽出・加工 データ利用者
イベント加工
イベント処理
バッチ
リアルタイム

19. Machine Learning:
分析

29. age income
20 300
30 500
40 700
age income
20 300
30 500
40 700
age income
0 0
0.5 0.5
1 1

30. チートシートを参照し、回帰分析に決定
適切な時間幅にデータをまとめる
データを平滑化する(移動平均)
データを正規化する

33. • 数百万イベント/秒、GB/秒 の受信能力
• AMQP、HTTPS のサポート

34. msdn.microsoft.com/library/dn790674.aspx
msdn.microsoft.com/library/jj933424.aspx
github.com/Azure/azure-event-hubs

35. Event Hubs へのイベント送信 (C#)

36. proce
ssed id
cy
cle
coun
ter
endof
cycle
set
ting1 …
set
ting3 s1 … s21
2016-05-24
T00:00:00.
1234567Z 1 1 1 0 -0.0007 … 100 518.67 … 23.419
… 1 1 2 0 0.0019 … 100 518.67 … 23.4236
… 1 1 3 0 -0.0043 … 100 518.67 … 23.3442
… 1 1 4 0 0.0007 … 100 518.67 … 23.3739
… 1 1 5 0 -0.0019 … 100 518.67 … 23.4044
… 1 1 6 0 -0.0043 … 100 518.67 … 23.3669
… 1 1 7 1 0.001 … 100 518.67 … 23.3774

39. Point of
Service Devices
Self Checkout
Stations
Kiosks
Smart
Phones
Slates/
Tablets
PCs/
Laptops
Servers
Digital
Signs
Diagnostic
EquipmentRemote Medical
Monitors
Logic
Controllers
Specialized
DevicesThin
Clients
Handhelds
Security
POS
Terminals
Automation
Devices
Vending
Machines
Kinect
ATM

40. Power BI

41. データ ストリーム: Event Hubs、IoT Hub、Blob Storage
参照データ: Blob Storage
データ ストア: SQL Database、Blob Storage、
DocumentDB、Data Lake Store
可視化: Power BI
イベント: Event Hubs、Service Bus (キュー/トピック)

42. Stream Analytics クエリ
SELECT
INTO
FROM

43. Stream Analytics クエリ
SELECT
CAST as Datetime as
CAST as float as
as
INTO
FROM

44. Stream Analytics クエリ
SELECT
max CAST as Datetime as
avg as
count as
INTO
FROM
GROUP BY TumblingWindow second
HAVING

45. Machine Learning:
分析

48. id cycle setting1 .. setting3 s1 .. s21 RUL
1 1 -0.0007 100 518.67 23.419 191
1 2 0.0019 100 518.67 23.4236 190
1 3 -0.0043 100 518.67 23.3442 189

49. id cycle setting1 ..setting3 s1 .. s21 a1 .. a21 RUL
1 1 -0.0007 100 518.6 23.419 518.67 23.419 191
1 2 0.0019 100 518.6 23.4236 518.67 23.4213 190
1 3 -0.0043 100 518.6 23.3442 518.67 23.3956 189

51. cycle Setting1 .. setting3 s1 .. s21 a1 .. a21 RUL
0 0.45977 NaN NaN 0.7246NaN 0.7786 191
0.00277 0.60919 NaN NaN 0.7310NaN 0.7829 190
0.00554 0.25287 NaN NaN 0.621375NaN 0.733906 189

52. cycle setting1 setting2 s2 … s21 a2 … a21 RUL
0 0.45977 0.166667 0.18373 0.72466 0.14396 0.77860191
0.00277 0.609195 0.25 0.28313 0.73101 0.20817 0.78299190
0.00554 0.252874 0.75 0.34337 0.62137 0.25551 0.73390189
0.00831 0.54023 0.5 0.34337 0.66238 0.27918 0.72354188

53. Filter Based Feature Selectionで

54. RUL cycle a4 .. sd13 .. setting1 setting2
1 0.736 0.732 0.054 0.003 0.001

55. RUL cycle a4 .. a11 sd13
191 0 0.289887 0.401786 0
190 0.00277 0.317735 0.409226 0.160656
189 0.00554 0.334766 0.357143 0.120224

65. Cortana Intelligence Suite
https://channel9.msdn.com/Series/powerbi-jp
https://azure.microsoft.com/ja-jp/solutions/cortana-intelligence/
Event Hubs
https://channel9.msdn.com/Series/powerbi-jp/powerBI-jp4
https://azure.microsoft.com/ja-jp/services/event-hubs/
http://aka.ms/eventhubstart

66. Stream Analytics
https://channel9.msdn.com/Series/powerbi-jp/powerBI-jp5
https://azure.microsoft.com/ja-jp/services/stream-analytics/
Data Factory
http://aka.ms/masotadf
https://doc.co/ofv4Vw
https://azure.microsoft.com/ja-jp/services/data-factory/

67. HDInsight
http://aka.ms/daiyuhdi
https://azure.microsoft.com/ja-jp/services/hdinsight/
Azure Machine Learning
http://aka.ms/masotaml
https://doc.co/4T2Tw7/Ysdv6D
https://azure.microsoft.com/ja-jp/services/machine-learning/

68. Power BI
http://aka.ms/seijikpbi
https://doc.co/iZKqkb
https://powerbi.microsoft.com/ja-jp/

69. データアクセスのためのツール
http://storageexplorer.com/
http://aka.ms/masotasqltool
データ解析のためのツール
http://microsoft.github.io/RTVS-docs/

70. aka.ms/solutiontemplates

71. 【 Session ID 】
DBP-013
アンケートにご協力ください。
●アンケートに 上記の Session ID のブレイクアウトセッションに
チェックを入れて下さい。
●アンケートはお帰りの際に、受付でご提出ください。
マイクロソフトスペシャルグッズと引換えさせていただきます。

72. ROOM D
Ask the Speaker のご案内
●本セッションの詳細は、EXPO 会場内
『Ask the Speaker』コーナー
Room D カウンタにてご説明させて
いただきます。是非、お立ち寄りください。
Ask the Speaker
EXPO会場MAP