SlideShare a Scribd company logo
1 of 37
1Copyright © 2018 Cavity.LLC All Rights Reserved.
非エンジニアよ
エクセル辞めて
BigQueryを使いなさい
2Copyright © 2018 Cavity.LLC All Rights Reserved.
自己紹介
名前 ・・・ 小野 寛徳 / Hironari Ono
所属 ・・・ Cavity LLC Founder COO
※ビッグデータコンサルティングの会社の管理がメイン
フリーの求人広告ライター
趣味 ・・・ 料理
GCP歴 ・・・ 3ヶ月くらい
● HR、自動車、クラウドなど色々やって現在に至る
● たまに外部で登壇、大学で授業とか
Copyright © 2018 Cavity.LLC All Rights Reserved.
会社概要
➢社名 : Cavity合同会社(英:Cavity.LLC)
➢本社 : 滋賀県東近江市
➢代表社員 : 中田 祐樹(CEO/CTO) ・ 小野 寛徳(COO)
➢設立 : 平成30年4月20日
➢資本金 : 10円
➢事業内容 : ビッグデータコンサルティング事業
・ IaaSを用いたデータ活用コンサルティング
・ イベント運営、コミュニティ形成支援
4Copyright © 2018 Cavity.LLC All Rights Reserved.
データウェアハウス?
● データの倉庫で、何らかの判断や分析材料として利用が主目的
● SAP/Oracleなどが代表格で、専門のSEが運用することも多い
● データマイニングツールと呼ばれる分析ツールの利用
● データマートと呼ばれる利用目的別のDBを作るケースも多い
(顧客情報(CRM) + 自社売上管理DB など)
● DBとの決定的な違いは
○ トランザクションレベルでの性能は期待しない
○ 更新しない(する場合は追加、もしくはコピーで再度マート化
○ 削除なし(する場合はデータセットもろとも削除
5Copyright © 2018 Cavity.LLC All Rights Reserved.
正直、難しい
プロダクト差がえぐい・・・
6Copyright © 2018 Cavity.LLC All Rights Reserved.
あげく、遅い
7Copyright © 2018 Cavity.LLC All Rights Reserved.
なので
非エンジニアは
使わない
8Copyright © 2018 Cavity.LLC All Rights Reserved.
だが
Business Big Query
BBQを推進したい
9Copyright © 2018 Cavity.LLC All Rights Reserved.
CoFounderがGCPにはまる
きっかけ
10Copyright © 2018 Cavity.LLC All Rights Reserved.
なのでとりあえず
イベントに出てみる
Cloud OnBoardね
11Copyright © 2018 Cavity.LLC All Rights Reserved.
GAEのデモで
コードをぶち込んだら勝手に
サーバーが増えて消えてく
12Copyright © 2018 Cavity.LLC All Rights Reserved.
13Copyright © 2018 Cavity.LLC All Rights Reserved.
すげぇ!!
14Copyright © 2018 Cavity.LLC All Rights Reserved.
よし!使ってみよう
15Copyright © 2018 Cavity.LLC All Rights Reserved.
という訳で
16Copyright © 2018 Cavity.LLC All Rights Reserved.
ハンズオンに参加してみる
17Copyright © 2018 Cavity.LLC All Rights Reserved.
18Copyright © 2018 Cavity.LLC All Rights Reserved.
もっかい感動
この感動は是非次回以降のハンズオンで体験してください!
※宣伝じゃないですよw
19Copyright © 2018 Cavity.LLC All Rights Reserved.
という訳で今回は
その感動を皆様にお裾分けします
20Copyright © 2018 Cavity.LLC All Rights Reserved.
エンジニアの知識がない人間が
ビッグクエリなんて
使えるんですかいの~?
21Copyright © 2018 Cavity.LLC All Rights Reserved.
大丈夫、必要なのは
「踏み出す勇気」
22Copyright © 2018 Cavity.LLC All Rights Reserved.
アカウントの有効化やら
なんやらは割愛
23Copyright © 2018 Cavity.LLC All Rights Reserved.
ここから選択して
画面を呼び出そう
24Copyright © 2018 Cavity.LLC All Rights Reserved.
とりあえず、適当に
Create new datasetで新しく箱を作り
CreateTableでデータをぶっこむ
25Copyright © 2018 Cavity.LLC All Rights Reserved.
何がすごいって「Automatically detect」に
チェック入れるとGoogleさんがいい感じに
スキーマを設定してくれちゃう親切設計
※一回自分で一個ずつ手打ちしてみたけど
諦めましたw
26Copyright © 2018 Cavity.LLC All Rights Reserved.
From Co-Founder
見えただけじゃ意味無いじゃん
クエリ叩かないと
27Copyright © 2018 Cavity.LLC All Rights Reserved.
数時間悶絶
❏ 適当にクエリっぽいものを入れてみる
❏ ネットで「BigQuery サンプル」で検索
❏ SQLの基本っぽいサイトを見てみる
❏ GCPのクイックスタートドキュメントを見つける
❏ 知ってる人に聞く
(概念が理解できてないからよく分からない)
28Copyright © 2018 Cavity.LLC All Rights Reserved.
これ全部失敗のクエリw
29Copyright © 2018 Cavity.LLC All Rights Reserved.
BQの中から日付のカラム
だけを抜き出しただけ
※要は色々試した結果、心が折れたので、とりあえず成功を求めただけですw
30Copyright © 2018 Cavity.LLC All Rights Reserved.
キター!!!!
31Copyright © 2018 Cavity.LLC All Rights Reserved.
そして、GoogleDataStudioを起動して
BigQueryのデータを接続すると
32Copyright © 2018 Cavity.LLC All Rights Reserved.
33Copyright © 2018 Cavity.LLC All Rights Reserved.
キター!!!!
34Copyright © 2018 Cavity.LLC All Rights Reserved.
所感
35Copyright © 2018 Cavity.LLC All Rights Reserved.
➔非エンジニアでもこれだけのことが画面に従うだけでできちゃう
➔SalesForceなどのデータとの相性が非常に良いので営業やマーケに相性が
良い印象。表やグラフ作成処理のことを考えるとエクセルより絶対に楽
➔ただ、使いこなそうとすると最低限のSQLの知識やらなんやらはいるの
で、勉強は必須。(これ絶対悶絶します)
➔何より色分けとかの概念がそもそもないし、セルに数式を入れることも
ないから壊れない!!!(超重要)
36Copyright © 2018 Cavity.LLC All Rights Reserved.
非エンジニアの皆さんに
GCPを使わせて驚かせましょう!
&教えてドヤ顔しましょうw
そして、GCPを使う非エンジニアが増えたら嬉しいな~♪
そして、僕に教えて欲しいな~w
37Copyright © 2018 Cavity.LLC All Rights Reserved.
ご清聴ありがとうございました。

More Related Content

Similar to 非エンジニアよ エクセル辞めてBigQueryを使いなさい

Similar to 非エンジニアよ エクセル辞めてBigQueryを使いなさい (20)

[BIT VALLEY -INSIDE-Vol.3]KPTをやめよう
[BIT VALLEY -INSIDE-Vol.3]KPTをやめよう[BIT VALLEY -INSIDE-Vol.3]KPTをやめよう
[BIT VALLEY -INSIDE-Vol.3]KPTをやめよう
 
私たち企業がアクセシビリティに取り組む理由(2018年) #accfes
私たち企業がアクセシビリティに取り組む理由(2018年) #accfes私たち企業がアクセシビリティに取り組む理由(2018年) #accfes
私たち企業がアクセシビリティに取り組む理由(2018年) #accfes
 
20180326副業しているエンジニア交流会「プランノーツ流・見積術」
20180326副業しているエンジニア交流会「プランノーツ流・見積術」20180326副業しているエンジニア交流会「プランノーツ流・見積術」
20180326副業しているエンジニア交流会「プランノーツ流・見積術」
 
Netadashi Meetup #6 20170629
Netadashi Meetup #6 20170629Netadashi Meetup #6 20170629
Netadashi Meetup #6 20170629
 
3月アドフラウド勉強会_「アドフラウド調査レポート」制作の裏話
3月アドフラウド勉強会_「アドフラウド調査レポート」制作の裏話3月アドフラウド勉強会_「アドフラウド調査レポート」制作の裏話
3月アドフラウド勉強会_「アドフラウド調査レポート」制作の裏話
 
Yahoo!ニュースにおける開発手法の取り組み
Yahoo!ニュースにおける開発手法の取り組みYahoo!ニュースにおける開発手法の取り組み
Yahoo!ニュースにおける開発手法の取り組み
 
[CTO Night & Day 2019] Amazon Culture #ctonight
[CTO Night & Day 2019] Amazon Culture #ctonight[CTO Night & Day 2019] Amazon Culture #ctonight
[CTO Night & Day 2019] Amazon Culture #ctonight
 
JSUG 2018 BTC
JSUG 2018 BTCJSUG 2018 BTC
JSUG 2018 BTC
 
イベント向けQR決済アプリSKIYAKI PAYのPayPal実装について
イベント向けQR決済アプリSKIYAKI PAYのPayPal実装についてイベント向けQR決済アプリSKIYAKI PAYのPayPal実装について
イベント向けQR決済アプリSKIYAKI PAYのPayPal実装について
 
イベント決済向けQR決済アプリSKIYAKI PAYのPayPal実装について
イベント決済向けQR決済アプリSKIYAKI PAYのPayPal実装についてイベント決済向けQR決済アプリSKIYAKI PAYのPayPal実装について
イベント決済向けQR決済アプリSKIYAKI PAYのPayPal実装について
 
ソフトウェアジャパン2018 ITフォーラムセッション(3)
ソフトウェアジャパン2018 ITフォーラムセッション(3)ソフトウェアジャパン2018 ITフォーラムセッション(3)
ソフトウェアジャパン2018 ITフォーラムセッション(3)
 
保育園でAIを使ってみた!
保育園でAIを使ってみた!保育園でAIを使ってみた!
保育園でAIを使ってみた!
 
ディップ株式会社_kintonehive
ディップ株式会社_kintonehiveディップ株式会社_kintonehive
ディップ株式会社_kintonehive
 
LINEでAnimal Techをやっていきたい(Help me!)
LINEでAnimal Techをやっていきたい(Help me!)LINEでAnimal Techをやっていきたい(Help me!)
LINEでAnimal Techをやっていきたい(Help me!)
 
海外先進IoT事例を材料に、日本のIoTビジネスを共に創ろう!(再) _IoTビジネス共創ラボ 第10回 勉強会
海外先進IoT事例を材料に、日本のIoTビジネスを共に創ろう!(再) _IoTビジネス共創ラボ 第10回 勉強会 海外先進IoT事例を材料に、日本のIoTビジネスを共に創ろう!(再) _IoTビジネス共創ラボ 第10回 勉強会
海外先進IoT事例を材料に、日本のIoTビジネスを共に創ろう!(再) _IoTビジネス共創ラボ 第10回 勉強会
 
Api meet up online#6 session1 ginco
Api meet up online#6 session1 gincoApi meet up online#6 session1 ginco
Api meet up online#6 session1 ginco
 
中小企業におけるキャッシュレス決済導入のポイント
中小企業におけるキャッシュレス決済導入のポイント中小企業におけるキャッシュレス決済導入のポイント
中小企業におけるキャッシュレス決済導入のポイント
 
[BIT VALLEY -INSIDE-Vol.4]トヨタに何を学ぶのか(5分ダイジェスト版)
[BIT VALLEY -INSIDE-Vol.4]トヨタに何を学ぶのか(5分ダイジェスト版)[BIT VALLEY -INSIDE-Vol.4]トヨタに何を学ぶのか(5分ダイジェスト版)
[BIT VALLEY -INSIDE-Vol.4]トヨタに何を学ぶのか(5分ダイジェスト版)
 
ヤフーでHardeningを実施する意味 (#sec_kansai #sosaisec)
ヤフーでHardeningを実施する意味 (#sec_kansai #sosaisec)ヤフーでHardeningを実施する意味 (#sec_kansai #sosaisec)
ヤフーでHardeningを実施する意味 (#sec_kansai #sosaisec)
 
[XP祭り2018]野良LT~最近思うこと~
[XP祭り2018]野良LT~最近思うこと~[XP祭り2018]野良LT~最近思うこと~
[XP祭り2018]野良LT~最近思うこと~
 

Recently uploaded

Recently uploaded (11)

LoRaWANスマート距離検出センサー DS20L カタログ LiDARデバイス
LoRaWANスマート距離検出センサー  DS20L  カタログ  LiDARデバイスLoRaWANスマート距離検出センサー  DS20L  カタログ  LiDARデバイス
LoRaWANスマート距離検出センサー DS20L カタログ LiDARデバイス
 
新人研修 後半 2024/04/26の勉強会で発表されたものです。
新人研修 後半        2024/04/26の勉強会で発表されたものです。新人研修 後半        2024/04/26の勉強会で発表されたものです。
新人研修 後半 2024/04/26の勉強会で発表されたものです。
 
業務で生成AIを活用したい人のための生成AI入門講座(社外公開版:キンドリルジャパン社内勉強会:2024年4月発表)
業務で生成AIを活用したい人のための生成AI入門講座(社外公開版:キンドリルジャパン社内勉強会:2024年4月発表)業務で生成AIを活用したい人のための生成AI入門講座(社外公開版:キンドリルジャパン社内勉強会:2024年4月発表)
業務で生成AIを活用したい人のための生成AI入門講座(社外公開版:キンドリルジャパン社内勉強会:2024年4月発表)
 
LoRaWAN スマート距離検出デバイスDS20L日本語マニュアル
LoRaWAN スマート距離検出デバイスDS20L日本語マニュアルLoRaWAN スマート距離検出デバイスDS20L日本語マニュアル
LoRaWAN スマート距離検出デバイスDS20L日本語マニュアル
 
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その32024/04/26の勉強会で発表されたものです。
 
Observabilityは従来型の監視と何が違うのか(キンドリルジャパン社内勉強会:2022年10月27日発表)
Observabilityは従来型の監視と何が違うのか(キンドリルジャパン社内勉強会:2022年10月27日発表)Observabilityは従来型の監視と何が違うのか(キンドリルジャパン社内勉強会:2022年10月27日発表)
Observabilityは従来型の監視と何が違うのか(キンドリルジャパン社内勉強会:2022年10月27日発表)
 
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...
論文紹介:Video-GroundingDINO: Towards Open-Vocabulary Spatio-Temporal Video Groun...
 
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games
論文紹介: The Surprising Effectiveness of PPO in Cooperative Multi-Agent Games
 
論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding
論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding
論文紹介:Selective Structured State-Spaces for Long-Form Video Understanding
 
NewSQLの可用性構成パターン(OCHaCafe Season 8 #4 発表資料)
NewSQLの可用性構成パターン(OCHaCafe Season 8 #4 発表資料)NewSQLの可用性構成パターン(OCHaCafe Season 8 #4 発表資料)
NewSQLの可用性構成パターン(OCHaCafe Season 8 #4 発表資料)
 
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。
Amazon SES を勉強してみる その22024/04/26の勉強会で発表されたものです。
 

非エンジニアよ エクセル辞めてBigQueryを使いなさい

  • 1. 1Copyright © 2018 Cavity.LLC All Rights Reserved. 非エンジニアよ エクセル辞めて BigQueryを使いなさい
  • 2. 2Copyright © 2018 Cavity.LLC All Rights Reserved. 自己紹介 名前 ・・・ 小野 寛徳 / Hironari Ono 所属 ・・・ Cavity LLC Founder COO ※ビッグデータコンサルティングの会社の管理がメイン フリーの求人広告ライター 趣味 ・・・ 料理 GCP歴 ・・・ 3ヶ月くらい ● HR、自動車、クラウドなど色々やって現在に至る ● たまに外部で登壇、大学で授業とか
  • 3. Copyright © 2018 Cavity.LLC All Rights Reserved. 会社概要 ➢社名 : Cavity合同会社(英:Cavity.LLC) ➢本社 : 滋賀県東近江市 ➢代表社員 : 中田 祐樹(CEO/CTO) ・ 小野 寛徳(COO) ➢設立 : 平成30年4月20日 ➢資本金 : 10円 ➢事業内容 : ビッグデータコンサルティング事業 ・ IaaSを用いたデータ活用コンサルティング ・ イベント運営、コミュニティ形成支援
  • 4. 4Copyright © 2018 Cavity.LLC All Rights Reserved. データウェアハウス? ● データの倉庫で、何らかの判断や分析材料として利用が主目的 ● SAP/Oracleなどが代表格で、専門のSEが運用することも多い ● データマイニングツールと呼ばれる分析ツールの利用 ● データマートと呼ばれる利用目的別のDBを作るケースも多い (顧客情報(CRM) + 自社売上管理DB など) ● DBとの決定的な違いは ○ トランザクションレベルでの性能は期待しない ○ 更新しない(する場合は追加、もしくはコピーで再度マート化 ○ 削除なし(する場合はデータセットもろとも削除
  • 5. 5Copyright © 2018 Cavity.LLC All Rights Reserved. 正直、難しい プロダクト差がえぐい・・・
  • 6. 6Copyright © 2018 Cavity.LLC All Rights Reserved. あげく、遅い
  • 7. 7Copyright © 2018 Cavity.LLC All Rights Reserved. なので 非エンジニアは 使わない
  • 8. 8Copyright © 2018 Cavity.LLC All Rights Reserved. だが Business Big Query BBQを推進したい
  • 9. 9Copyright © 2018 Cavity.LLC All Rights Reserved. CoFounderがGCPにはまる きっかけ
  • 10. 10Copyright © 2018 Cavity.LLC All Rights Reserved. なのでとりあえず イベントに出てみる Cloud OnBoardね
  • 11. 11Copyright © 2018 Cavity.LLC All Rights Reserved. GAEのデモで コードをぶち込んだら勝手に サーバーが増えて消えてく
  • 12. 12Copyright © 2018 Cavity.LLC All Rights Reserved.
  • 13. 13Copyright © 2018 Cavity.LLC All Rights Reserved. すげぇ!!
  • 14. 14Copyright © 2018 Cavity.LLC All Rights Reserved. よし!使ってみよう
  • 15. 15Copyright © 2018 Cavity.LLC All Rights Reserved. という訳で
  • 16. 16Copyright © 2018 Cavity.LLC All Rights Reserved. ハンズオンに参加してみる
  • 17. 17Copyright © 2018 Cavity.LLC All Rights Reserved.
  • 18. 18Copyright © 2018 Cavity.LLC All Rights Reserved. もっかい感動 この感動は是非次回以降のハンズオンで体験してください! ※宣伝じゃないですよw
  • 19. 19Copyright © 2018 Cavity.LLC All Rights Reserved. という訳で今回は その感動を皆様にお裾分けします
  • 20. 20Copyright © 2018 Cavity.LLC All Rights Reserved. エンジニアの知識がない人間が ビッグクエリなんて 使えるんですかいの~?
  • 21. 21Copyright © 2018 Cavity.LLC All Rights Reserved. 大丈夫、必要なのは 「踏み出す勇気」
  • 22. 22Copyright © 2018 Cavity.LLC All Rights Reserved. アカウントの有効化やら なんやらは割愛
  • 23. 23Copyright © 2018 Cavity.LLC All Rights Reserved. ここから選択して 画面を呼び出そう
  • 24. 24Copyright © 2018 Cavity.LLC All Rights Reserved. とりあえず、適当に Create new datasetで新しく箱を作り CreateTableでデータをぶっこむ
  • 25. 25Copyright © 2018 Cavity.LLC All Rights Reserved. 何がすごいって「Automatically detect」に チェック入れるとGoogleさんがいい感じに スキーマを設定してくれちゃう親切設計 ※一回自分で一個ずつ手打ちしてみたけど 諦めましたw
  • 26. 26Copyright © 2018 Cavity.LLC All Rights Reserved. From Co-Founder 見えただけじゃ意味無いじゃん クエリ叩かないと
  • 27. 27Copyright © 2018 Cavity.LLC All Rights Reserved. 数時間悶絶 ❏ 適当にクエリっぽいものを入れてみる ❏ ネットで「BigQuery サンプル」で検索 ❏ SQLの基本っぽいサイトを見てみる ❏ GCPのクイックスタートドキュメントを見つける ❏ 知ってる人に聞く (概念が理解できてないからよく分からない)
  • 28. 28Copyright © 2018 Cavity.LLC All Rights Reserved. これ全部失敗のクエリw
  • 29. 29Copyright © 2018 Cavity.LLC All Rights Reserved. BQの中から日付のカラム だけを抜き出しただけ ※要は色々試した結果、心が折れたので、とりあえず成功を求めただけですw
  • 30. 30Copyright © 2018 Cavity.LLC All Rights Reserved. キター!!!!
  • 31. 31Copyright © 2018 Cavity.LLC All Rights Reserved. そして、GoogleDataStudioを起動して BigQueryのデータを接続すると
  • 32. 32Copyright © 2018 Cavity.LLC All Rights Reserved.
  • 33. 33Copyright © 2018 Cavity.LLC All Rights Reserved. キター!!!!
  • 34. 34Copyright © 2018 Cavity.LLC All Rights Reserved. 所感
  • 35. 35Copyright © 2018 Cavity.LLC All Rights Reserved. ➔非エンジニアでもこれだけのことが画面に従うだけでできちゃう ➔SalesForceなどのデータとの相性が非常に良いので営業やマーケに相性が 良い印象。表やグラフ作成処理のことを考えるとエクセルより絶対に楽 ➔ただ、使いこなそうとすると最低限のSQLの知識やらなんやらはいるの で、勉強は必須。(これ絶対悶絶します) ➔何より色分けとかの概念がそもそもないし、セルに数式を入れることも ないから壊れない!!!(超重要)
  • 36. 36Copyright © 2018 Cavity.LLC All Rights Reserved. 非エンジニアの皆さんに GCPを使わせて驚かせましょう! &教えてドヤ顔しましょうw そして、GCPを使う非エンジニアが増えたら嬉しいな~♪ そして、僕に教えて欲しいな~w
  • 37. 37Copyright © 2018 Cavity.LLC All Rights Reserved. ご清聴ありがとうございました。