データを分析し、機械学習などを活用していくためにはデータを蓄積することがまず重要となります。データウェアハウス、データレイクといったデータ分析の第一歩をわかりやすく説明し、それがビジネスにどう役立つかをお話します。また、それを Google Cloud Platform BigQuery や Google Cloud Storage, G Suite といったサービスを活用することでどのように簡単に実現できるかもご紹介します。

1. Cloud Onr
Cloud OnAir
Cloud OnAir
ビジネスを変革する！クラウドを活用し
たデータ分析基盤の第一歩
2018 年 4 月 19 日 放送 e-Learning 補助資料

2. Agenda
Cloud OnAir
1
3
2
企業におけるデータの活用 （振り返り）
E-learning (データレイクとデータウェアハウス)
まとめ

3. Cloud OnAir
Cloud OnAir
企業におけるデータ活用

4. Cloud OnAir
はじめに
先週の放送
データを使いこなして
● 分析で売上の落ちてる原因がわかる
● 意思決定を助ける
● 機械学習テクノロジーを使いこなす
最初の一歩の話をしました

5. Cloud OnAir
ふりかえり
● データを活用するためには、 データを 蓄積、整理・分析 する必要がある
○ データを蓄積：データレイク
○ データを整理・分析：データウェアハウス (DWH)
● クラウドならではのスケーラビリティ、コストを利用することで気軽に構築
機械学習、データ分析などを活用する時を逃さない
第一歩目 ： データ活用のための基盤を構築

6. Cloud OnAir
振り返り
データレイク データウェアハウス
事業の
データベース
Webサイトのア
クセスログ
分析者

7. Cloud OnAir
振り返り
データレイク データウェアハウス
事業の
データベース
Webサイトのア
クセスログ
分析者
Cloud Storage BigQuery

8. Cloud OnAir
Cloud OnAir
本日の手順

9. Cloud OnAir
Appendix. Google Cloud Storage へのアップロード (1)
1. Cloud Storage でバケットを作成

10. Cloud OnAir
Appendix. Google Cloud Storage へのアップロード (2)
1. Cloud Storage でバケットを作成

11. Cloud OnAir
Appendix. Google Cloud Storage へのアップロード (3)
1. Cloud Storage でバケットを作成

12. Cloud OnAir
Appendix. パブリックデータのダウンロード
パブリックデータをダウンロードして、
データレイクに保存します。
● 地震データ
http://earthquake.usgs.gov/earthquakes/map/

13. Cloud OnAir
1. 設定ボタンをクリック
2. 30日分、マグニチュード 2.5+を選択
4. “Download Earthquakes”ボタンをクリック
し、”CSV”を選択してダウンロードする
3. 画面左上の「∨」をクリック

14. Cloud OnAir
Zip を解凍し、 CSV ファイルをドロップしてアップロード

15. Cloud OnAir
Gsutil を利用する (自動化の際に利用)
Gsutil : コマンドラインの GCS 操作ツール
https://cloud.google.com/storage/docs/gsutil
● 任意のサーバー、クライアントにインストールしてアップ
ロードを自動化する
● Cloud Shell から利用する

16. Cloud OnAir
Gsutil を利用する (自動化の際に利用)
Cloud Shell を起動
1. Cloud Shell ボタンをクリック
2. Cloud Shell が起動

17. Cloud OnAir
Gsutil を利用する (自動化の際に利用)
バケットを確認する
$ gsutil ls
地震データをアップロードする
$ wget
https://earthquake.usgs.gov/earthquakes/feed/v1.0/summary/2.5_month.csv
$ gsutil ls

18. Cloud OnAir
Gsutil を利用する (自動化の際に利用)
地震データをダウンロードする
$ wget
https://earthquake.usgs.gov/earthquakes/feed/v1.0/summary/2.5_month.csv
地震データをアップロードする
$ wget
https://earthquake.usgs.gov/earthquakes/feed/v1.0/summary/2.5_month.csv