Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

Actualidade e Futuro do BI

Luanda, Outubro de 2013

José Alexandre

Aula Magna

UNIAUniversidade Independente de

Angola

U.A.N

Alguns dados meus• Algumas Responsabilidades Atuais

• Director Técnico da empresa HiperSoft Tecnology Lda • Docente do Departamento de Engenharia Informática da UAN• Consultor de Desenvolvimento Aplicativos e OpenSoftware da PROSIST • Membro Efectivo da Sociedade Brasileira de Computação -SBC• Membro da CAFA e Ex-Representante da mesma , em LINS-SP

• Graduação• Tecnologia em Análise e desenvolvimento de Sistemas, pela UNILINS, São Paulo• Sistemas de Informação, pela UNILINS, São Paulo• Engenharia Informática, pela UAN, Luanda

• Pós Graduação• Engenharia de Componentes usando Java, pela FIOS, São Paulo

• Extensão universitária• Supply Chain management –Cadeia Logistica , pela FGV, São Paulo

• Mestrando• Direcção em Marketing Digital, pela IEP, Madrid

História - Business IntelligenceSurgiu a milhares de anos atrás (Persas, Egípcios e outros povos.);

Cruzavam informações provenientes da natureza;Períodos de chuvas, comportamento dos mares, etc.Para tomarem decisões;

Uma referência anterior : Sun Tzu - A Arte da Guerra;Deter todo o conhecimento de suas fraquezas e virtudes, além de todo o conhecimento das fraquezas e virtudes do inimigo; A falta deste conhecimento pode resultar na derrota;

Como conhecemos, surgiu na década de 70/80;Problemas

Faltava poder de processamento;Não existiam Banco de dados;Ainda não existia interfaces desktop;

Termo foi cunhado pelo Gartner em 1992;Antes disso já existiam outros termos (Olap, DW, etc);

Inteligência empresarial (Business Intelligence)

refere-se ao processo de coleta, organização, análise, compartilhamento e monitoramento de informações que oferecem suporte a gestão de negócios.

é um termo do Gartner Group. O conceito surgiu na década de 80 e descreve as habilidades das corporações para aceder a dados e explorar informações (normalmente contidas em um Data Warehouse/Data Mart), analisando-as e desenvolvendo percepções e entendimentos a seu respeito, o que lhes permite incrementar e tornar mais pautada em informações a tomada de decisão.

Wikipedia

● Características– Extrai e integra dados de múltiplas fontes;

– Fazer uso da experiência (dados históricos);

– Analisa dados contextualizados;

– Trabalha com hipóteses;

– Procura relações de causa e efeito;

– Transformar os registros obtidos em informação útil para o conhecimento empresarial;

– Conceitos de BI são aplicáveis a todo tipo de empresa, independente de seu porte, faturamento ou segmento.

Como funciona o BI

Data Warehouse

DefiniçãoSegundo Inmon, Data Warehouse é uma coleção de dados orientados por assuntos, integrados, variáveis com o tempo e não voláteis, para dar suporte ao processo de tomada de decisão;

Kimball define assim: é um conjunto de ferramentas e técnicas de projeto, que quando aplicadas às necessidades específicas dos usuários e aos bancos de dados específicos permitirá que planejem e construam um data warehouse.

ETL

Extração, transformação e carga;

Ambientes heterogêneos;

Várias fontes de dados;

Etapa bastante demorada;

Realizado “fora de hora”;

Fase mais crítica;

OLAP (On-Line Analytical Processing)

Forma alternativa de tratamento da informação,

Processamento de dados,

Dedicado ao suporte a decisão,

Por meio de visualização de dados agregrados ao longo de várias dimensões analíticas (tempo, espaço, categoria de produto, quantidade vendida, preço...),

Hierarquizadas em várias granularidades,

Armazenados em BD especializadas,

Seguindo um modelo lógico de dados multidimensional,

Operacional e analítico

O processo operacional tem funções limitadas, que são implementadas e oferecidas de acordo com a política da empresa. Também chamado de OLTP (on-line transaction processing)

• Ex. Relatório de resultados financeiros

O processamento analítico é em essência não limitado, permitindo a criatividade das pessoas envolvidadas. Também é chamado de OLAP (on-line analytical Processing)

• Ex. Relatório indicando desempenho comparativo ao do último mês, mesmo mês do ano anterior ou a seis meses atrás

A população mundial é estimada em 7 bilhões de pessoas

http://www.census.gov/popclock/

http://www.techzine.com.br/arquivo/voc-sabe-quanto-vale-1-zettabyte/

O mercado de big data já movimenta 26 bilhões de dólares em todo o mundo. Das 500 maiores companhias globais, 450 têm projetos nessa área. Como a partir de agora empresas de menor porte devem passar a usar essa ferramenta, estima-se que o mercado de big data chegue a 38 bilhões de dólares em 2015.

http://exame.abril.com.br/revista-exame/edicoes/1025/noticias/para-nao-se-afogar-em-numeros?page=3

http://computerworld.uol.com.br/negocios/2013/03/15/negocios-na-era-do-big-data/

Fluxo de informação, mapa mundi a noite

Fluxo de informação, mapa mundi Facebook

Fluxo de informação, mapa mundi Twitter

Fluxo de informação, mapa mundi tráfego aéreo

Quantos bytes cada um de nós produz por dia? Quantos bytes já produzimos em toda a nossa vida?

Tudo isso gera um banco de dados mundial.

2020 previsão de 40 zettabytes

Em Los Angeles, um notável experimento está em andamento, a polícia está tentando prever os crimes, antes mesmo de que eles aconteçam.

O conceito Big Data pode ser resumidamente definido como

uma coleção de bases de dados tão complexa

e volumosa que se torna muito difícil e complexa fazer algumas

operações simples (remoção, ordenação, sumarização) de

forma eficiente utilizando Sistemas Gerenciadores de

Bases de Dados tradicionais.

É um termo usado para descrever o crescimento, a

disponibilidade e o uso exponencial de informações

estruturadas e não estruturadas.

Em uma linguagem técnica, Big Data é definido como o conjunto

de soluções tecnológicas capazes de lidar com dados

digitais em:

Na prática, esta tecnologia permite analisar qualquer tipo

de informação digital em tempo real, sendo fundamental para a

tomada de decisões.

Internet das coisas:Cada objeto poderá ter o seu IP.

Roupas, carros, geladeiras, bolsas, etc com chips

inteligentes que geram dados do seu comportamento e

experiência o tempo todo.

Plataformas utilizadas mundialmente:

Hadoop é uma plataforma de software em Java de computação distribuída voltada para clusters e processamento de grandes massas

de dados.MongoDB (do "humongous") é

uma aplicação de código aberto, de alta performance, sem esquemas,

orientado a documentos.

Breve demo prática do Mongodb

http://www.mongodb.com/solutions/big-data

Big Data ajudouObama a ganhar eleições

Na Amazon, vender produtos é apenas

Uma questão de catalisar dados, percebemos que o negócio da Amazon na verdade é Big

Data.Confira em Amazon Web Services

http://aws.amazon.com/pt/big-data/

Big data tornou-se ferramenta essencial não só para os

departamentos de tecnologia e análise das empresas, mas também

para as áreas de marketing, negócios e relacionamento, uma vez

que precisam entender não só o perfil do consumidor, mas seu

comportamento nas redes sociais, hábito de consumo, intenção de compras, relevância e influência.

Empresas que trabalham com grande número de clientes precisam analisar uma grande quantidade de informações em tempo real e tomar decisões que afetam os negócios e a

concorrência.

Como a NSA consegue espionar milhões de pessoas nos EUA?

A Agência de Segurança Nacional americana montou um gigantesco

esquema para bisbilhotar as comunicações nos Estados Unidos e

em outros países.

A questão “não” são os dados, mas o que você faz com eles.

“O big data não faz milagre”Para uma das maiores autoridades

em big data, o americano Peter Hirshberg, as ferramentas que

analisam grandes volumes de dados, essa tecnologia fará parte da vida de todas as empresas desde que haja

gente que saiba usá-la.

“O big data precisa de pessoas qualificadas nesta nova área”

Em Angola criará uma preocupação para...

MAPTESS

CINFOTEC

EMPRESAS

Universidades e demais entidades

“Como andam e como ficarão os lideres de topo nas empresas ?”

O temos hoje o CEO “CEU”

O CEO dará espaço para o CIO “cio”

Até já tem simpósio próprio

Seus outros nomes...

Download gratuito!

http://public.dhe.ibm.com/common/ssi/ecm/en/iml14296usen/IML14296USEN.PDF

http://mundodosdocs.com/docmentarios/politica/bbc-a-era-dos-grandes-dados-bbc-the-age-of-big-data/?utm_source=rss&utm_medium=rss&utm_campaign=bbc-a-era-dos-grandes-dados-bbc-the-age-of-big-data

http://www1.folha.uol.com.br/mercado/1200232-empresas-aproveitam-so-05-dos-dados-gerados-no-mundo-digital.shtml

http://www.planejamentodevendas.com.br/gestao-comercial/o-que-e-big-data/

http://www.techzine.com.br/arquivo/voc-sabe-quanto-vale-1-zettabyte/

http://info.abril.com.br/noticias/ti/big-data-ajudou-obama-a-ganhar-eleicoes-15012013-25.shl

http://public.dhe.ibm.com/common/ssi/ecm/en/iml14296usen/IML14296USEN.PDF

http://www.flightradar24.com/

http://brazil.emc.com/campaign/global/big-data/hfbd-infographic-4web-1500.jpg?cmp=micro-big_data-general-emc

http://www.youtube.com/watch?v=LsMt5jp1a9k

http://exame.abril.com.br/tecnologia/noticias/painel-discute-big-data-e-o-consumidor-nas-redes-sociais

http://exame.abril.com.br/tecnologia/noticias/como-a-nsa-consegue-espionar-milhoes-de-pessoas-nos-eua?page=1

http://exame.abril.com.br

http://www.google.com/url?q=http%3A%2F%2Fwww.bigdatabrasil.net%2F&sa=D&sntz=1&usg=AFQjCNE_NrI3OTBYEydhru3p_0cWukbvFw

Referências

http://globotv.globo.com/globo-news/manhattan-connection/v/livro-big-data-mostra-o-perigo-da-revolucao-digital/2465167/

http://www1.folha.uol.com.br/mercado/1200232-empresas-aproveitam-so-05-dos-dados-gerados-no-mundo-digital.shtml

http://tecnologia.terra.com.br/internet/universo-paralelo-do-big-data-traz-medos-e-surpresas,f97bfe32cdbda310VgnCLD200000bbcceb0aRCRD.html

http://exame.abril.com.br/revista-exame/edicoes/1025/noticias/para-nao-se-afogar-em-numeros?page=2

http://data.ime.usp.br/sbbd2012/artigos/pdfs/sbbd_min_01.pdf

http://www.walmartlabs.com/

http://exame.abril.com.br/revista-exame/edicoes/1025/noticias/para-nao-se-afogar-em-numeros?page=3

http://www.slideshare.net/carlosalbertops/big-data-23110598

http://www.slideshare.net/alexculpado/savedfiles?s_title=big-data-17675968&user_login=VivaldoJoseBreternitz

http://www.slideshare.net/laodias/os-cinco-vs-do-big-data?from_search=12

alexandreomedio@gmail.com

alexandreomedio@gmail.com