Successfully reported this slideshow.
We use your LinkedIn profile and activity data to personalize ads and to show you more relevant ads. You can change your ad preferences anytime.












Data Team(3)
kyle
COO




x N
x N


Dependency 

(= )
사실	저	웹개발의	ㅇ도	모르는	
그저	데이터쟁이,,,
Code GUI( Click )


( )


(Desktop, Server,
Online) 3
MySQL

BigQuery
MySQL
MySQL

BigQuery
Elastic
Search
3,510 8,932 9,5...


https://www.slideshare.net/openstacks/bigquery-20170215-t
event_dim.date event_dim.name name firebase_event_origin
20170914 Save_Name firebase app
20170914 Save_Name bigquery app
201...
id diff_date
a 2018-03-02 2018-03-02 0
a 2018-03-02 2018-03-03 1
b 2018-01-05 2018-03-03 57
c 2018-04-02 2018-04-04 2
Google Cloud
BigQuery
Google Cloud
Dataflow
Query Data Load - Transform - Write


Data Load BigQuery Raw


Transform, Write...
Google Cloud
BigQuery
Google Cloud
Dataflow
Query Data Load - Transform - Write


Data Load BigQuery Raw


Transform, Write...
Google Cloud
BigQuery
Google Cloud
Dataflow
Query Data Load - Transform - Write


Data Load BigQuery Raw


Transform, Write...




Selfie 

!!
https://github.com/yahoo/open_nsfw
Good

Image








Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Little Big Data #1. 바닥부터 시작하는 데이터 인프라
Upcoming SlideShare
Loading in …5
×

of

Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 1 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 2 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 3 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 4 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 5 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 6 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 7 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 8 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 9 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 10 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 11 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 12 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 13 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 14 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 15 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 16 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 17 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 18 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 19 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 20 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 21 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 22 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 23 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 24 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 25 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 26 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 27 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 28 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 29 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 30 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 31 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 32 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 33 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 34 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 35 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 36 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 37 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 38 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 39 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 40 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 41 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 42 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 43 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 44 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 45 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 46 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 47 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 48 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 49 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 50 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 51 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 52 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 53 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 54 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 55 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 56 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 57 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 58 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 59 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 60 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 61 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 62 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 63 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 64 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 65 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 66 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 67 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 68 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 69 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 70 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 71 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 72 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 73 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 74 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 75 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 76 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 77 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 78 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 79 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 80 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 81 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 82 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 83 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 84 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 85 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 86 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 87 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 88 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 89 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 90 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 91 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 92 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 93 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 94 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 95 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 96 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 97 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 98 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 99 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 100 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 101 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 102 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 103 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 104 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 105 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 106 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 107 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 108 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 109 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 110 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 111 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 112 Little Big Data #1. 바닥부터 시작하는 데이터 인프라 Slide 113
Upcoming SlideShare
What to Upload to SlideShare
Next
Download to read offline and view in fullscreen.

81 Likes

Share

Download to read offline

Little Big Data #1. 바닥부터 시작하는 데이터 인프라

Download to read offline

Little Big Data #1 다양한 사람들의 데이터 사이언스 이야기에서 발표한 자료입니다

궁금한 것은 언제나 문의주세요 :)

행사 후기는 https://zzsza.github.io/etc/2018/04/21/little-big-data/ 에 있습니다!
(2018.5 내용 추가) 현재 회사가 없으니, 제게 관심있으신 분들도 연락 환영합니다 :)

Related Books

Free with a 30 day trial from Scribd

See all

Little Big Data #1. 바닥부터 시작하는 데이터 인프라

  1. 1. 
 
 

  2. 2. 
 
 
 Data Team(3) kyle COO
  3. 3.
  4. 4.
  5. 5. x N
  6. 6. x N Dependency (= )
  7. 7. 사실 저 웹개발의 ㅇ도 모르는 그저 데이터쟁이,,,
  8. 8. Code GUI( Click ) 
 ( ) (Desktop, Server, Online) 3 MySQL BigQuery MySQL MySQL BigQuery Elastic Search 3,510 8,932 9,520 18,842 - - E : 30,374 L : 8,857 K :9,208
  9. 9.
  10. 10. https://www.slideshare.net/openstacks/bigquery-20170215-t
  11. 11. event_dim.date event_dim.name name firebase_event_origin 20170914 Save_Name firebase app 20170914 Save_Name bigquery app 20170914 Save_Name firebase app 20170914 Save_Name seongyun app
  12. 12. id diff_date a 2018-03-02 2018-03-02 0 a 2018-03-02 2018-03-03 1 b 2018-01-05 2018-03-03 57 c 2018-04-02 2018-04-04 2
  13. 13. Google Cloud BigQuery Google Cloud Dataflow Query Data Load - Transform - Write Data Load BigQuery Raw Transform, Write ($ 5/1TB) vCPU, RAM, https://cloud.google.com/solutions/performing-etl-from-relational-database-into-bigquery
  14. 14. Google Cloud BigQuery Google Cloud Dataflow Query Data Load - Transform - Write Data Load BigQuery Raw Transform, Write ($5 / 1TB) vCPU, RAM, 

  15. 15. Google Cloud BigQuery Google Cloud Dataflow Query Data Load - Transform - Write Data Load BigQuery Raw Transform, Write ($5 / 1TB) vCPU, RAM,
  16. 16.
  17. 17.
  18. 18. Selfie !!
  19. 19. https://github.com/yahoo/open_nsfw
  20. 20. Good Image
  21. 21.
  22. 22.
  23. 23. 
 

  • Ywook

    Nov. 8, 2021
  • ssuser63b1b2

    Aug. 17, 2021
  • jh0x4s

    Jul. 2, 2021
  • DanielKim664

    May. 28, 2021
  • LeeDAEGUN

    Apr. 17, 2021
  • JihoWoo1

    Feb. 19, 2021
  • daeheecho

    Feb. 13, 2021
  • ssuser69c8dd

    Dec. 20, 2020
  • SangminLee161

    Oct. 5, 2020
  • KyungaPark1

    Sep. 10, 2020
  • JungWanKim3

    Aug. 2, 2020
  • ChaeminOh1

    Jul. 20, 2020
  • WonyoungChoi2

    Jun. 25, 2020
  • ssuser3a3d40

    Jun. 12, 2020
  • ChoEunjung2

    Jun. 5, 2020
  • IanYoon

    May. 22, 2020
  • wonkyungkim10

    Mar. 20, 2020
  • JobKang

    Mar. 16, 2020
  • Doilad

    Feb. 21, 2020
  • jonghunahn125

    Dec. 27, 2019

Little Big Data #1 다양한 사람들의 데이터 사이언스 이야기에서 발표한 자료입니다 궁금한 것은 언제나 문의주세요 :) 행사 후기는 https://zzsza.github.io/etc/2018/04/21/little-big-data/ 에 있습니다! (2018.5 내용 추가) 현재 회사가 없으니, 제게 관심있으신 분들도 연락 환영합니다 :)

Views

Total views

13,889

On Slideshare

0

From embeds

0

Number of embeds

1,065

Actions

Downloads

281

Shares

0

Comments

0

Likes

81

×