amazon kinesis: processamento de big data em tempo real

José Papo

Amazon Evangelist

@josepapo

@josepapo

Desafio: Tempo, solo e outras variáveis afetam as colheitas

Solução: Construção de modelos preditivos baseados em informação de sensores e de solo 60 anos de dados de colheitas, 14 TBs de dados de solo, 1 milhão de sensores de temperatura 50 cluster EMR (Hadoop) clusters processam dados continuamente para manter o modelo atualizado e confiável para os clientes.

We are sincerely eager

to hear your feedback

on this presentation and

on re:Invent.

Please fill out an

evaluation form when

you have a chance.

We are sincerely eager

to hear your feedback

on this presentation and

on re:Invent.

Please fill out an

evaluation form when

you have a chance.

DEMOS E

CÓDIGO!!!

Clickstream Analytics with Amazon Kinesis

Clickstream Processing App

Aggregate

Clickstream

Statistics

Clickstream Archive

Clickstream Trend Analysis

Simple Metering & Billing with Amazon Kinesis

Billing Auditors

Incremental Bill

Computation

Metering Record Archive

Billing Management Service

Custo do Shard por Hora: $0,015

Por 1 Milhão de Transações: $0,028

Por $4,22 ao dia ou $130,80 por mês você

pode ter um throughput de 10 MB/segundo

com 400 GB por dia e 1.000 PUTS por

segundo. E um total de 86.400.000 de

registros por dia ou 2.678.400.000 de

registros por mês.

OBRIGADO!

http://awshub.com.br

slideshare.net/AmazonWebServicesLATAM

José Papo

Amazon Evangelist

@josepapo