20210529 phpconfokinawa lt_snowflake_v1.0

Snowflakeの威力を見よ！
2021-05-29 PHPCONF OKINAWA 2021
LT ちゅらデータ菱沼雄太
© 2021 Chura DATA inc. PROPRIETARY & CONFIDENTIAL.

AGENDA
• 自己紹介
• 1分で分るDWH
• 1分で分るSnowflake
• 終わりに

自己紹介
名前：菱沼雄太
ちゅらデータのCTO（2020/4〜）
私の人生のメイン言語はPHP
ゲーム会社でちょっとCTOしたり、昔は金融SEやったりの真面目な経歴も
ありつつ、基本はなんでも屋です。
本職はインフラエンジニア…のハズ？
最近はデータエンジニアかもしれない？
沖縄歴4年目、最近はDATA CLOUD SUMMITで喋ったり、SnowVillageで配
信したり、Snowflake系の活動が多いです。
最近マイナビに載った写真
怖い
本物はこっち

1分で理解るDWH（比較表）
分類
高速化技法
データ格納
方針
得意なクエリ
設計パターン
DWH
RDB
OLTP＝トランザクション用
(Online Transaction Processing)
OLAP＝分析用
(Online Analytical Processing)
インデックスパーティショニングで分散処理
行指向、行ごとに格納列指向、列ごとに格納
1行を対象にSelectやUpdate 特定列をGroupbyして集計
第3正規化スタースキーマ
具体例 MySQL、PostgreSQL Snowflake、BigQuery
わか

1分で理解るDWH（内部動作イメージ）
わか
②Indexをスキャン
UPDATE USERS SET age = 11
WHERE id = 1;
①クエリを解析
③対象行を上書き
１山田 10=>11 *** ***
2 佐藤 10 *** ***
3 高橋 10 *** ***
id name age *** ***
RDB DWH
SELECT category, avg(age) FROM USERS
GROUP BY category;
①クエリを解析
②対象列を分散スキャン、集計して返却
１山田 11 A ***
2 佐藤 10 B ***
3 高橋 20 B ***
id name age category ***

Snowflake

Snowflakeのアーキテクチャ
クラウドサービス
仮想ウェアハウス
(EC2)
ストレージ
(S3)

Snowflakeの特徴
どこまで
スケール
ストレージ費用
サーバ維持費
PHPでつなげ
る？
1レコード取り出
すの苦手なんで
しょ？
コンピューティングとストレージ分離してる
から、ほぼ無限にスケール
ストレージ$25/TB月、S3と同じくらい安い
使うときだけ起動するから、作っておくだけ
なら維持費がかからないぞ。安い。
マイナーで
しょ？
最強
ｘ
安い
ｘ
苦手もない
ｘ
もはやメジャー
pdo_snowflakeか、ODBCを使えるから、簡
単につなげる。
実はRDBと同じようなIndexを貼る検索最適化
機能があるので、そんなことなかった
アメリカですでにテック系最大金額の上場を
果たしてて、日本法人も最近できた

競合製品とのトレンド比較(=もはや差はない)

デモ
レッツゴー！

デモ
と思ったけど時間がねー！！

Snowflakeの威力は…

続きは
• https://www.youtube.com/watch?v=StW4ffZZn7w

Snowflakeの威力は…
https://www.youtube.com/watch?v=StW4ffZZn7
w

続きは
https://www.youtube.com/watch?v=StW4ffZZn7
w

今度勉強会をやります！！！
• 福岡のNOB DATAさんとコラボで実施
します〜
• 絶対きてくれよな！！！
• https://churadata.connpass.com/event
/214074/

20210529 phpconfokinawa lt_snowflake_v1.0

More Related Content

Featured

20210529 phpconfokinawa lt_snowflake_v1.0

Editor's Notes