Amazon Kinesis: Processamento de Big Data em Tempo Real

1. José Papo
Amazon Evangelist
@josepapo
@josepapo

3. Desafio:
Tempo, solo e outras variáveis afetam
as colheitas
Solução:
Construção de modelos preditivos
baseados em informação de
sensores e de solo
60 anos de dados de colheitas,
14 TBs de dados de solo,
1 milhão de sensores de
temperatura
50 cluster EMR (Hadoop) clusters
processam dados continuamente

5. We are sincerely eager
to hear your feedback
on this presentation and
on re:Invent.
Please fill out an
evaluation form when
you have a chance.

7. We are sincerely eager
to hear your feedback
on this presentation and
on re:Invent.
Please fill out an
evaluation form when
you have a chance.

11. DEMOS E
CÓDIGO!!!

12. Clickstream Analytics with Amazon Kinesis
Clickstream Archive
Aggregate
Clickstream
Statistics
Clickstream Trend Analysis
Clickstream Processing App

13. Simple Metering & Billing with Amazon Kinesis
Metering Record Archive
Incremental Bill
Computation
Billing Management Service
Billing Auditors

14. Custo do Shard por Hora:
$0,015
Por 1 Milhão de Transações:
$0,028
Por $4,22 ao dia ou $130,80 por mês você
pode ter um throughput de 10 MB/segundo
com 400 GB por dia e 1.000 PUTS por
segundo. E um total de 86.400.000 de
registros por dia ou 2.678.400.000 de
registros por mês.

15. OBRIGADO!
http://awshub.com.br
slideshare.net/AmazonWebServicesLATAM
José Papo
Amazon Evangelist
@josepapo