José Papo

Amazon Evangelist

@josepapo

@josepapo

“Algorithms have already written symphonies as moving as those

composed by Beethoven,

picked through legalese with the

deftness of a senior law partner, diagnosed patients

with more accuracy than a

doctor, written news articles

like a seasoned reporter,

and driven vehicles on urban highways with better control

than a human driver.”

○○○○

Desafio: Tempo, solo e outras variáveis afetam as colheitas

Solução: Construção de modelos preditivos baseados em informação de sensores e de solo 60 anos de dados de colheitas, 14 TBs de dados de solo, 1 milhão de sensores de temperatura 50 cluster EMR (Hadoop) clusters processam dados continuamente para manter o modelo atualizado e confiável para os clientes.

○○○○

○○○○

○○○○

Mais de 25 Milhões de Membros

50 Bilhões de eventos por dia

30 Milhões de vídeos vistos por

dia

2 bilhões de horas de vídeo em 3

meses

4 milhões de resenhas/dia

3 milhões de buscas/dia

Localização de dispositivo

e outros dados

Dados de mídias sociais

10 TB de streaming por dia

~1 PB de dados armazenados no Amazon S3

S3

Dados consumidos de várias maneiras

S3

EMR

Prod Cluster (EMR)

Recommendation

Engine

Ad-hoc

Analysis Personalization

○○○○

Foursquare…

33 milhões de usuários 1,3 milhão de empresas

…gera muitos dados 3,5 bilhões de check-ins 15 milhões de locais, Terabytes de dados de logs

○○○○

○○○○

○○○○

○○○○

• O Operador Nacional do Sistema Elétrico (ONS)

é uma empresa privada, responsável pelo

planejamento e operação da geração e

transmissão de energia elétrica no Sistema

Interligado Nacional (SIN).

• Com cerca de 800 funcionários, em 5

localidades (Rio de Janeiro, Recife,

Florianópolis e Brasília), o ONS é uma empresa

intensiva em informações com uso contínuo de

modelos matemáticos que requer HPC (High

Performance Computing e Big Data)

“A Amazon Web Services permitiu provisionar clusters de alto

desempenho em minutos, rodando em paralelo, reduzindo

significantemente o tempo total de processamento”.

“Com isso, percebemos

que a AWS é

magicamente, muito

mais rápida, elástica e barata que nossos blades

atuais” - Sérgio Mafra

○○○○

○○○○

0

1.000.000

2.000.000

3.000.000

4.000.000

5.000.000

6.000.000

Custo do Shard por Hora: $0,015

Por 1 Milhão de Transações: $0,028

Por $4,22 ao dia ou $130,80 por mês você pode ter

um throughput de 10 MB/segundo com 400 GB por

dia. E um total de 86.400.000 de registros por dia ou

2.678.400.000 de registros por mês.

OBRIGADO!

http://awshub.com.br

slideshare.net/AmazonWebServicesLATAM

José Papo

Amazon Evangelist

@josepapo