Successfully reported this slideshow.
We use your LinkedIn profile and activity data to personalize ads and to show you more relevant ads. You can change your ad preferences anytime.
1000 

• :

MySQL, Mongo, TD,
• :

cron, scp, grep, perl , sh ,
• :

MySQL, TD, Excel, Spreadsheet, ,
•
•
•
•
• Redshift
• Bricolage
• Rundeck Kuroko2
Amazon Redshift
• Redshift
•
Bricolage
• Redshift Bricolage
• Bricolage
- http://
blog.mwed.info/posts/wedding-dwh-status-2016-06.html
Kuroko2
• Bricolage Kuroko2
• DWH
•
•
OSS Kuroko2 -
http://blog.mwed.info/posts/kuroko2-mwed-2016-10.html
• : Redshift
• :

Kuroko2, Bricolage, fluentd, embulk, Kinesis
Firehose
• : Redshift
• fluentd
•
• Aggregator
• embulk
•
• Amazon Kinesis Firehose
• S3
• fluentd → Firehose
Redshift
• 50 (2016/6/3) → 147 (2016/11/2
• MySQL
•
•
• or
• Kuroko2: 4
• Bricolage: 154
•
• embulk: 3
Embulk - http://
blog.mwed.info/posts/embulk-filter-query_string.html
•
•
•
•


Redshift
No
• re:dash
• dmemo
• Slack
•
re:dash
• Redshift
• URL
•
dmemo
•
•
dmemo -
http://techlife.cookpad.com/entry/2016/08/08/103906
Slack
•
• bot
•
• Redshift 

re:dash 

dmemo


みんなのウェディングのデータ分析基盤の作り方。
みんなのウェディングのデータ分析基盤の作り方。
みんなのウェディングのデータ分析基盤の作り方。
みんなのウェディングのデータ分析基盤の作り方。
みんなのウェディングのデータ分析基盤の作り方。
Upcoming SlideShare
Loading in …5
×

みんなのウェディングのデータ分析基盤の作り方。

6,032 views

Published on

みんなのウェディングのデータ分析基盤の作り方。

Published in: Technology
  • Be the first to comment

みんなのウェディングのデータ分析基盤の作り方。

  1. 1. 1000 

  2. 2. • :
 MySQL, Mongo, TD, • :
 cron, scp, grep, perl , sh , • :
 MySQL, TD, Excel, Spreadsheet, ,
  3. 3. • • • •
  4. 4. • Redshift • Bricolage • Rundeck Kuroko2
  5. 5. Amazon Redshift • Redshift •
  6. 6. Bricolage • Redshift Bricolage • Bricolage - http:// blog.mwed.info/posts/wedding-dwh-status-2016-06.html
  7. 7. Kuroko2 • Bricolage Kuroko2 • DWH • • OSS Kuroko2 - http://blog.mwed.info/posts/kuroko2-mwed-2016-10.html
  8. 8. • : Redshift • :
 Kuroko2, Bricolage, fluentd, embulk, Kinesis Firehose • : Redshift
  9. 9. • fluentd • • Aggregator • embulk • • Amazon Kinesis Firehose • S3 • fluentd → Firehose
  10. 10. Redshift • 50 (2016/6/3) → 147 (2016/11/2 • MySQL • • • or
  11. 11. • Kuroko2: 4 • Bricolage: 154 • • embulk: 3 Embulk - http:// blog.mwed.info/posts/embulk-filter-query_string.html
  12. 12. • • • •
  13. 13. 
 Redshift
  14. 14. No
  15. 15. • re:dash • dmemo • Slack •
  16. 16. re:dash • Redshift • URL •
  17. 17. dmemo • • dmemo - http://techlife.cookpad.com/entry/2016/08/08/103906
  18. 18. Slack • • bot
  19. 19. • • Redshift 
 re:dash 
 dmemo
  20. 20.

×