o verdadeiro big data - fabiane nardon

Fabiane Bizinella Nardon

@fabianenardon

O Verdadeiro Big Data:

Oportunidades e

Desafios

www.tail.digital

BIG DATA

Todos os seus dados não cabem

em uma só máquina

by

Fern

and

o S

tan

kun

s

Você está falando mais em

Terabytes

do que em Gigabytes

A quantidade de dados que você

processa cresce constantemente. E

deve dobrar no ano que vem.

2,5 Exabytes de dados são

produzidos todos os dias.Em 1 ano equivale a uma pilha de 873 mil Km de

DVDs

INTERNET

CLOUD COMPUTING

IOT

Processamento Distribuído

INTERNET

CLOUD COMPUTING

IOT

Mais dados foram produzidos nos últimos 2 anos do

que em todo o resto da história humana

A cada minuto, 300 horas de vídeo são enviadas para

o YouTube

Uma única pesquisa do Google usa 1.000

computadores para respondê-la em 0.2 segundos

Varejistas que usarem todo o poder dos dados podem

aumentar sua margem operacional em 60%

Calcula-se que apenas0.5% dos dados produzidos

são analisados

Fonte: The Data Made Me Do It, MIT, 2013

DATA SCIENCE

DATA SCIENCE=

BIG DATA

+ESTATÍSTICA

+INTELIGÊNCIA ARTIFICIAL

DATA SCIENCE

DATA SCIENCE

PUBLICIDADE DIGITAL

Real Time Bidding

Ad Exchange

DSP DSP DSP

Real Time Bidding

Ad Exchange

DSP DSP DSP

?

DADOS

OU

DATA MARKETPLACES

80% PREPARAÇÃO DOS

DADOS

20% ALGORITMOS

DETECÇÃO DE PADRÕES

MULHERES EM TERAPIA DE REPOSIÇÃO

HORMONAL TÊM MENOS RISCO DE

DOENÇAS CARDÍACAS

MULHERES EM TERAPIA DE REPOSIÇÃO

HORMONAL TÊM MENOS RISCO DE

DOENÇAS CARDÍACAS

MULHERES EM TERAPIA DE REPOSIÇÃO

HORMONAL TINHAM UMA CONDIÇÃO

SÓCIO ECONÔMICA MELHOR E POR ISSO

TINHA MENOS RISCO DE DOENÇAS

CARDÍACAS

E-HARMONY

DATA SCIENCE É RESPONSÁVEL POR

5% DOS CASAMENTOS NOS EUA

MATCHING POR AFINIDADEPREFERÊNCIA GASTRONÔMICA

25% -1% -24% 20% 13%

9% -5% -27% 7% 0%

-12% -21% -42% 19% -23%

19% 0% -28% 28% 10%

9% -11% -35% 11% 44%

25%

-42%

44%

MATCHING POR AFINIDADEDiferença de altura

MATCHING POR AFINIDADENÍVEL DE ZOOM

Número de divórcios

Fonte: “Marital Satisfaction and Break-ups Differ across On-line and Off-line Meeting Venues,” Proceedings of the National Academy of Sciences.

7.67 %

5.96 %

Offline Online

PREDIÇÃO

NETFLIX

75% DA AUDIÊNCIA DO

NETFLIX VEM DO ALGORITMO

DE RECOMENDAÇÃO

LEARNING TO RANK

DEEP LEARNING

HTTPS://QUICKDRAW.WITHGOOGLE.COM

NVIDEA SELF DRIVEN CARS

Fonte: http://cortica.com/

Fonte: http://cortica.com/

Fabiane Bizinella Nardon

@fabianenardon

O Verdadeiro Big Data:

Oportunidades e

Desafios

www.tail.digital