いまできるデータ分析を Power BI ではじめよう

シニアテクニカルアーキテクト
清水優吾（しみずゆうご） / 株式会社セカンドファクトリー
@yugoes1021
yugoes1021 Microsoft MVP
for Data Platform - Power BI
(2017.02 -)
いまできるデータ分析を
Power BI ではじめよう
～ Let’s start Power BI from Flat files (CSV, Excel) ～
2018-08-28
データ分析プラットフォーム勉強会#3 @ SGT
2018/08/28 データ分析プラットフォーム勉強会 #3 1
https://www.slideshare.net/yugoes1021

自己紹介：
清水優吾 (Yugo Shimizu) ♂
株式会社セカンドファクトリー
シニアテクニカルアーキテクト
• もともと金融系システムの開発者。今はテクニカルアーキテクト。
• 時々コーディングもしてます。
専門: Power BI, Web API, “つくらず、つなぐこと”
興味: MS Flow, Logic Apps, IFTTT, PowerApps, o365 周辺サービス
Twitter: @yugoes1021 Facebook: yugoes1021
Qiita: https://qiita.com/yugoes1021
Power BI 勉強会: https://powerbi.connpass.com
Microsoft MVP
for Data Platform -
Power BI
(2017.02 - )

注意事項と前提
■注意事項
• 資料はすべて公開（powerbi.connpass.com or SlideShare）
• 写真・動画の撮影は自由に！
• 私の肖像権はフリー
• SNS 等へのアップOK（私以外の方が含まれる場合は、ご遠慮願います。）
ハッシュタグ：
#PowerBI #PBIJP #PBIJP758
■私が心掛けていること
• 誰でも実現可能な方法であること
• お金がかかっても、できるだけ安価であること
• なにより「試してみよっかなー」と思っていただけること
https://www.slideshare.net/yugoes1021

お約束
What is BI?

データベース
ダッシュボード
レポート
会議で JUDGE現場へ GO
Business Intelligence
現場で DO
意
思
決
定
の
た
め
に
通常業務により自然と溜まるデータ
どこでも SEE
現場で DO
5

データベース
レポート
Business Intelligence
現場で DO
通常業務により自然と溜まるデータ
どこでも SEE
現場で DO
6

理想はわかった
でもそこに行くまでに
どうしたらいいの？

理想はわかった
でもそこに行くまでに
どうしたらいいの？
フェーズ１
手動
フェーズ２
自動化
フェーズ３
マルチソース化
難易度
価値
コ
ス
ト
（
時
間
と
お
金
）

2018/08/28 9
【フェーズ１】
システムからデータをフラットファイル(CSV、Excel)でダウ
ンロード
データをグラフ化して、ファイルを共有
分析
現場へ
手動で
ダウン
ロード
DB
分析
可視化
全体のコストの80-90％
議論・判
断

2018/08/28 10
【フェーズ２】
システムと BI ツールを自動連携。定期的かつ必要なタイミ
ングで最新データがグラフ化され、分析や議論に適切な時間
を費やすことができ、繰り返し「試行」が可能となる
自動連携
議論・判
断
BI ツー
ル
DB
現場へ
可視化
分析
試行

2018/08/28 11
【フェーズ３】
複数のシステムをデータソースとして DWH を構成、データ
を一元管理して、BI ツールを自動連携。データがグラフ化さ
れ、分析や議論。
自動連携
分析
議論・判
断
BI ツー
ル
DB
現場
へ
可視化
DB
SaaS
SNS
DWH

レ
ポ
ー
テ
ィ
ン
グ
モ
デ
リ
ン
グ
１．データソース接続
２．データ取得 (Extract)
３．変換、整形 (Transform)
４．モデルへの読み込み (Load)
５．リレーションの設定
６．レポート作成
７．ダッシュボード作成
８．レポート、ダッシュボードの共有
９．通知設定
Power BI のレポートを作成するまでに必要な手順
７～９はオプションです

フェーズ１

フェーズ１のシナリオです
BI ツール
Power BI
Desktop
データソース
CSV, Excel
DB
フェーズ１
• データソースのファイルは毎月作成される
• 毎月締めごとにレポートを作成したくない

BI ツール
Power BI
Desktop
CSV, Excel
DB
データソース
共有フォルダ
Windows
Server
データソースをフォルダにすることで、毎月作成されるファイルをフォルダに保存し、
Power BI Desktop でデータの最新化をするだけで OK。レポートを再作成する必要はない
フェーズ１
SaaS
Power BI
Service
レポート
発行

CSV, Excel
DB
フェーズ１
SaaS
Power BI
Service
最新データ
オンプレミス
データゲートウェイ
データソース
共有フォルダ
Windows
Server
共有フォルダにアクセス可能な Windows Server にオンプレミスデータゲートウェイを
インストールすることで共有フォルダのデータが Power BI Service に送られる
オンプレミスデータゲートウェイ
https://docs.microsoft.com/ja-jp/power-bi/service-gateway-onprem

Demo

０．[準備]Power BI Desktop を起動し [ファイル] ⇒ [オプションと設定] ⇒ [オプション]
フェーズ１
②
①
③
④

①
②
③
④
１．Power BI Desktop を起動し [データを取得] をクリック
フェーズ１
注意：
前のページでオプション設定をしていないと
このドロップダウンは出てきません
フォルダパスをパラメータ化しておくと汎用
的な pbix が作れます

①
名前：フォルダパス
説明：(任意)
必須：チェック
種類：すべて
提案された値：任意の値
現在の値：
C:WorkCAPJPData
②
③
④
⑤
フェーズ１

フェーズ１

各列の型（タイプ）を適切に設定していく
フェーズ１

このエラーが表示された場合
[プレビューの更新] をクリックすれば OK
フェーズ１

日付時刻文字列文字列
文字列文字列固定
小数点数
整数固定
小数点数
すべての列に設定後
フェーズ１

設定が終わったら [閉じて適用]
フェーズ１

２．カレンダーテーブルを作るカレンダー =
var BaseCalendar = CALENDAR("2018/01/01", TODAY())
RETURN
GENERATE(
BaseCalendar,
var BaseDate = [Date]
var YearNumber = YEAR(BaseDate)
var MonthNumber = MONTH(BaseDate)
var DayNumber = WEEKDAY(BaseDate, 1)
RETURN ROW(
"年", YearNumber,
"月番号", MonthNumber,
"月", FORMAT(BaseDate, "mm月"),
"年月", FORMAT(BaseDate, "yyyy年mm月"),
"曜日番号", DayNumber,
"曜日", SWITCH(
DayNumber, 1, "日", 2, "月", 3, "火", 4, "水", 5, "木", 6, "金", 7, "土",""),
"週番号", WEEKNUM(BaseDate, 1),
"週", FORMAT(WEEKNUM(BaseDate, 1), "第00週")
)
)
フェーズ１

２．カレンダーテーブルを作る
必要に応じて以下を確認＆設定
1. [書式設定]
データ型、書式、
2. 並べ替えの設定
3. 可視化に不要な列を非表示に
フェーズ１

３．リレーションシップを設定
カレンダー.日付 : 売上.Date = 1:n
を設定する
[日付] を [Date] に
ドラッグ&ドロップする
フェーズ１

フェーズ１
7月の Power BI Desktop の更新で
• 1対1
• 1対多
• 多対1
に加えて多対多のリレーションが
指定可能になりました（まだプレビュー）

ちょっとデータを見てみましょう
• POS や売上データによくあるこの形
• データに [コード] と [名称] を含んでいる（商品、カテゴリー）
• このままだと RDB 化するのに都合が悪い
こういう時は Power Query でデータを
マスタに分けましょう。

元データからマスタを作るには
[クエリを編集] ⇒ [クエリを編集] で Power Query エディターを起動
元データを含んでいるクエリを右クリック ⇒ [参照]

元データが持っている [コード] や [名称] をマスタ化するために、
1. 作成するマスタの名称に変える
2. 必要な [コード] と [名称] 以外の列を削除する

マスター化完了

同様の手順で商品も
マスター化完了

CategoryName
ProductName
これらはマスタに
存在しているので、
非表示にする
右クリック ⇒
[レポートビューの
非表示]

スタースキーマ化後のモデル
元のデータ

2018/08/28 40
FACT
Dimension
DimensionDimension
Dimension
Dimension

2018/08/28 41
Dimension
DimensionDimension
Dimension
Dimension
One Fact and Multi Dimensions

翌月になりデータが増えた場合
CSV, Excel
新しいデータを該当フォルダ (C:WorkCAPJPData )
にコピーするだけで OK
データソースをフォルダにしている場合
• 拡張子が同じならファイル名は何でもよい
• データフォーマットは同じでなければならない
• 社内の共有フォルダがおすすめ
• データの整形（ETL）は不要

【フェーズ１】
システムからデータをフラットファイル(CSV、Excel)でダウ
ンロード
データをグラフ化して、ファイルを共有
分析
現場へ
手動で
ダウン
ロード
DB
分析
可視化
議論・判
断

フェーズ２

【フェーズ２】
システムと BI ツールを自動連携。定期的かつ必要なタイミ
ングで最新データがグラフ化され、分析や議論に適切な時間
を費やすことができ、繰り返し「試行」が可能となる
自動連携
議論・判
断
BI ツー
ル
DB
現場へ
可視化
分析
試行

フェーズ２
フェーズ２に移行するには以下2つが必要
1. BI 専用の DB
実は既に DB 設計はほぼ完了している
左の Power BI Desktop のリレーションシップ画面
の通りに DB を作成すれば OK
2. 元のデータソースから DB にデータを連携
データ連携の From, To により使えるツールが変わる。
Microsoft Flow, Azure Logic Apps
Azure Data Factory, HDInsight
連携ロジックが複雑な場合は Azure Functions や
AWS Lambda のようなソースコードをデプロイ可能
なサーバーレスコンピューティングサービスを検討す
る

フェーズ２
フェーズ２以降は技術者のチカラが必要になります
大事なのはフェーズ１を可能な限り早く実現してしまうこと
そうすればフェーズ２以降の実現の可能性がグッと高くなります

フェーズ２
ぜひフェーズ３を目指して
まずはフェーズ１を実現してみてください

【Appendix】
Power BI を使用した
トータルソリューション

Business Application Platform (Citizen Application Platform)
Flow Power BIPowerApps
• “コーディングなし” で
アプリが作れる
• マルチプラットフォーム
で動作する
• アプリは組織内で管理
• インストール不要
ビジネスロジックが
作れる
• １つのトリガーと
１つ以上のアクション
• MS以外のサービスも
接続可能
BI が実現できる
• データの可視化
• 分析用レポート
• リアルタイム
• 一時的にデータを保持
Office 365

Frontend Business Logic Data
Office 365
つまりシステムが作れる

Appendix

デモ１
PowerApps + Flow + Power BI
= 飲食店ソリューション

デモ１
デモ１のシナリオです

こんな行列
よくありま
すよね？
2018/08/28データ分析プラットフォーム勉強会 #3 55
例えば飲食店…

名前を書いて…待つ。。。

だから最近こんなの増えてますよね
https://www.recruit-lifestyle.co.jp/news/pressrelease/business/nw16192_20160225 より引用

デモ１
で、これを
PowerApps + Flow + Power BI で
作ってみた

デモ１のアーキテクチャ
Power BI Service
PowerApps
からデータ送信
Microsoft Flow
PowerApps
Teams
Mail

デモ２
Flow + AI + Power BI
= SNS投稿写真管理ソリューション

デモ２
デモ２のシナリオです

デモ２
Facebook と Twitter など複数の SNS に
同じ写真をそれぞれ投稿するのはめんどい…

デモ２
一発で両方に投稿したい
ってことでこれを Flow でやってみた

Microsoft
Flow Text
Analytics
Computer
Vision
ついでに投稿内容を
Cognitive Services で
解析しちゃおう
Microsoft
Flow アプリ
ボタン
Power BI
Service
Blob
Storage
Facebook
Twitter

まとめ

いかがでしたでしょうか？
Power BI
いろんな使い方ができるでしょ？

Frontend Business Logic Data
Office 365
つまりアイデアしだい

実業務でフェーズ１～３の
実現を目指したい方は
お仕事のご依頼
お待ちしております
(*ﾉωﾉ)

あるいは
9/8(土) 13:00 – 18:00 @ SGT
Power BI 勉強会 @ 東京 #9
https://powerbi.connpass.com/event/95698/

https://www.facebook.com/groups/JapanPBUG/
Power BI に興味がある人はもちろん
興味がない人もぜひご登録を(*’ω’*)

ご清聴ありがとうございました！
～ご不明な点は何なりと！～
より詳細にお話聞きたい、
実案件でご相談があるという場合は
遠慮なくお申し付けください
m(_ _)m

いまできるデータ分析を Power BI ではじめよう

More Related Content

What's hot

Similar to いまできるデータ分析を Power BI ではじめよう

More from Yugo Shimizu

いまできるデータ分析を Power BI ではじめよう

Editor's Notes