KGDC の クロスプラットフォームLT会 で発表したLTのスライドです マルチクラウドなDWHであるSnowflakeを紹介しました。 AWS,GCP,Azureのオブジェクトストレージにあるデータに対してクエリできるなど、まさにマルチクラウドな挙動がおすすめポイントです。

1. マルチクラウドDWHのすすめ
2021-05-27
クロスプラットフォームLT会
菱沼雄太
© 2021 Chura DATA inc. PROPRIETARY & CONFIDENTIAL.

2. AGENDA
© 2021 Chura DATA inc. PROPRIETARY & CONFIDENTIAL.
• 自己紹介
• なんで？LTしてるの？
• データウェアハウスって何？
• なんでSnowflake使うの？
• 終わりに

3. 自己紹介
名前：菱沼 雄太
ちゅらデータのCTO（2020/4〜）
ゲーム会社でちょっとCTOしたり、昔は金融SEやっ
たりの真面目な経歴もありつつ、基本はなんでも屋
です。
本職はインフラエンジニア…のハズ？
最近はデータエンジニアかもしれない？
沖縄歴4年目、最近はDATA CLOUD SUMMITで喋っ
たり、SnowVillageで配信したり、Snowflake系の活
動が多いです。
© 2021 Chura DATA inc. PROPRIETARY & CONFIDENTIAL.
最近マイナビに載った写真
怖い
本物はこっち

4. そもそも
なぜクロスプラットフォームが
テーマのLTに名乗りあげたのか
© 2021 Chura DATA inc. PROPRIETARY & CONFIDENTIAL.

5. クロスプラットフォーム？
クロスプラットフォーム
↓
プラットフォームまたいでいれば良いんじゃろ？
クラウドプラットフォームをまたげば
それもまたマルチプラットフォームだね？
© 2021 Chura DATA inc. PROPRIETARY & CONFIDENTIAL.
強引な拡大解釈
↓↓↓↓↓↓↓↓↓↓↓↓↓↓

6. クロスプラットフォーム
クロスプラットフォーム
↓
プラットフォームまたいでいれば良いんじゃろ？
クラウドプラットフォームをまたげば
それもまたマルチプラットフォームだよね？
© 2021 Chura DATA inc. PROPRIETARY & CONFIDENTIAL.
強引な拡大解釈
↓↓↓↓↓↓↓↓↓↓↓↓↓↓
うん うん それもまた ｸﾛｽﾌﾟﾗｯﾄﾌｫｰﾑ だね。

7. そんなわけで
本日ご紹介したいのは、
（スノーフレーク）
© 2021 Chura DATA inc. PROPRIETARY & CONFIDENTIAL.

8. Snowflakeとは
• データウェアハウスです
• RDB => ☓、DWH => ◎
• クラウドネイティブ
• オンプレ => ☓、クラウド => ◎
• 特定クラウドベンダーにロックインされない
• Redshift、BigQuery、Synapse => ☓、 Snowflake => ◎
© 2021 Chura DATA inc. PROPRIETARY & CONFIDENTIAL.

9. そもそもデータウェアハウスって？
RDBと違い大きな量のデータを分析するために設計され
たデータベース製品のことをデータウェアハウス(DWH)
といいます。
典型的な違い
• 一般的なRDBはデータを行でもちインデックスをうまく
使って、行レベルの入出力がとても効率的
• 一般的なDWHはデータを列でもち、列の集計をするとき
に不要なデータを読まなくて済む
それぞれ一長一短。
データ分析の世界では基本的にRDBを使わずにDWHを使
います。
© 2021 Chura DATA inc. PROPRIETARY & CONFIDENTIAL.

10. 大手クラウドベンダーが推すDWH
• Amazon Web Service
• Redshift
• Google Cloud Platform
• BigQuery
• Microsoft Azure
• Synapse Analytics
© 2021 Chura DATA inc. PROPRIETARY & CONFIDENTIAL.
それぞれ自社サービスとの連携が強い
Redshift + S3 + QuickSight
BigQuery + GCS + Looker
Synapse + Blob + PowerBI

11. 大手クラウドベンダーが推すDWH
• Amazon Web Service
• Redshift
• Google Cloud Platform
• BigQuery
• Microsoft Azure
• Synapse Analytics
© 2021 Chura DATA inc. PROPRIETARY & CONFIDENTIAL.
でも
お客様によってはデータが
いろんなクラウドに分散してるし、
BIツールは好きなのを使いたい
それぞれ自社サービスとの連携が強い
Redshift + S3 + QuickSight
BigQuery + GCS + Looker
Synapse + Blob + PowerBI

12. それSnowflakeでできるよ！
© 2021 Chura DATA inc. PROPRIETARY & CONFIDENTIAL.
AWS S3
GCP GCS
Azure Blob
Azureはアイコン見つ
けられない
Amazon QuickSight
データポータル
PowerBI
Azureはアイコン見つ
けられない

13. やり方もかんたん
© 2021 Chura DATA inc. PROPRIETARY & CONFIDENTIAL.
AWS S3
GCP GCS
Azure Blob
Amazon QuickSight
データポータル
PowerBI
Azureはアイコン見つ
けられない
外部テーブル定
義するだけ
コネクタ
設定するだけ

14. 他製品と比べたSnowflakeのいいところ
クラウドプラットフォームをまたいでDWH作れる以外にも…
• Redshift、Synapseはクラスタ立ち上げてないといけないので、無駄に
コストが発生しちゃう（※24時間バッチ回し続けてるとかならあり
• Snowflakeはクエリ叩いくと一瞬でクラスタがアサインされ、使わ
ないときは止まっているので、めっちゃ安くなる
• BigQueryはデータのスキャンした量で課金されちゃうのでたまに課金額
が高額になる（※通称BigQuery破産
• Snowflakeは時間課金なので、クソ遅いクエリで課金額大きくなり
そうなら途中で止めればいい
• 最近のDWH界隈はSnowflakeの機能を追いかけて他が実装してくる感じ
だからサイツヨ（※個人の感想です
• OracleやTeradataとかの方言をなにげにサポートしてたりしてて移行が
楽
• めちゃくちゃ高速動作
• 運用の手間がコスト管理くらいしかない
© 2021 Chura DATA inc. PROPRIETARY & CONFIDENTIAL.

15. Snowflakeの良くないところ
• 日本だとAWSにしかリリースされてない。AWSから
AzureやGCPへクエリすることになるから、大きい
データだとネットワークの費用が気になる。
• 言うてまだあまり知名度高くない
• 24時間走らせ続けるとかだとやっぱり高い
© 2021 Chura DATA inc. PROPRIETARY & CONFIDENTIAL.

16. 終わりに
もし興味を持ってくれたら使ってみてほしいです！
無料で30日間300ドル分使えます〜
ユーザグループのSnowVillageもよろしくね
https://www.youtube.com/channel/UC-FKvkAWBegvxZF4jkP7sLA
© 2021 Chura DATA inc. PROPRIETARY & CONFIDENTIAL.

17. 参考
• 外部テーブルの使用
• https://docs.snowflake.com/ja/user-guide/tables-external.html
• 外部テーブルは、クラウドストレージ（Amazon S3、Google Cloud Storage、ま
たはMicrosoft Azure）データレイクにあるデータファイルを参照します。
© 2021 Chura DATA inc. PROPRIETARY & CONFIDENTIAL.