São Paulo

Big Data: Crie um diferencial e reinvente o seu negócio

Bruno DominguesPrincipal Architect

Porque nos interessamos por Big Data?

Fonte: https://amplab.cs.berkeley.edu/2013/02/07/for-big-data-moores-law-means-better-decisions/

A quantidade de dados aumentar em proporção maior que a lei de Moore

2012 2014 2016 2018 2020

Moore's Law

Data

Error

Macro fatores que afetam o valor do Big Data…

Data

Explosão de volume, variedade,

velocidade e variabilidade de dados

Econômico — modelos de

negócio/condições criadas, alavancagem

e monetização dos dados

Tecnologia

Avanços em software de código aberto e

hardware de proposito geral para

armazenar, gerenciar e analisar dados

Tecnologia de fabricantes e produtos

relacionados que estendem tais

capacidades (e/ou mercado)

Cultura

Disseminação aplicações e habilidade

com inteligência de negócios e análises

Papeis emergentes, praticas e

organizações devotadas a “ciência dos

dados”

Computação Armazenamento

HumanosNegócio

Rede

Máquinas

Dados de Negócios

• Bonus Riddle:

How does this lead

to

Consumer

Loyalty?• During key life events, more open to

new habitually consumed products…

• Getting married?

• New home?

• Divorce?

www-nc.nytimes.com/2012/02/19/magazine/shopping-habits.html

O que estes produtos

possuem com comum?• Grandes quantidades de cálcio-magnésio

e zinco

• Loções e sabonetes sem odor

• Grandes sacos de bolas de algodão

• Detergente para roupas e para limpeza

de mãos

Score alto de de gravidezVarejo – Lealdade dos clientes

Facebook> 1 bilhões de usuários

> 300PB; >500TB/dia

> 35% das fotos do mundo

Twitter> 124B tweets/ano

> 390M/dia

~4500/segundo

Dados Humanos

YouTube>1000PB

+> 72 horas/minuto

> 37 milhões horas/ano

> 4 bilhões visitas/dia

Ligações nos EUA

(celular)> 2.2 T minutos/ano

> 19 minutos / pessoa / dia

(descompactados < 1

YouTube/ano)

Mensagens de Texto

Global> 6.1T por ano

>193,000 por segundo

> 876 por pessoa por ano

Esta próximo do

limite computacional

processar toda a

informação gerada

por humanos

Soluções de negócio para todas as industrias

Eficiência Operacional Comportamento de

Consumo

Segurança e

Gerenciamento de Risco

Otimização de trafego

Smart Energy Grid

Propaganda inteligente.

Programa de proteção para o

comprador

Cuidados personalizados de

prevenção

Redução de Fraudes

Big Data como Produto: ImmobilienScout (Deutsche Telekom)

–

Monetização de dados e serviços

• Dado de cliente baseado em

informações estáticas como idade,

gênero, endereço residencial e

informações sobre dispositivo

independente de fabricante e

sistema operacional

• Uso da Informação em contexto,

aplicações e sites de Internet

visitados e no método, hora e

frequência das interações com

outros usuários

• Local da Informação relacionado

ao usuário e lugares visitados

• Informações detalhadas de

serviços bancários e até mesmo

transações que o usuário tenha

realizado

Como extrair valor e entregar serviço?

• Criar uma estratégia clara e monetizar o dado dos clientes:

prioridades, casos de uso, implementar o plano com os

resultados esperados

• Identificar as principais fontes de dados em seus sistemas

• Simplificação da arquitetura e foco na gestão de qualidade fim-a-

fim

• Automatize o máximo possível dos processos de negócio em

toda a organização

• Desenvolva um modelo de dados que possa suportar diferentes

casos de uso por diferentes usuários da organização

• Construa uma infraestrutura que permita a entrega de serviços

sob demanda e em tempo real

Diferenciais IntelIntel® Xeon® E5 v3: Criptografia

Diferenciais IntelIntel® Xeon® E5 v3: AVX

Olhando o todo...

4HRS

50%redução

<7MIN

80%Redução 50%

Redução 40%Redução

TeraSort para

1TB

Intel®

Xeon® E5

2600 v3

Intel

SSD 10G

Ethernet Otimização do

Hadoop com Intel

Intel® Xeon®

“anterior”