aula magna sobre bi & bigdata na unia, luanda - angola

77
Actualidade e Futuro do BI Luanda, Outubro de 2013 José Alexandre Aula Magna UNIA Universidade Independente de Angola U.A.N

Upload: alexculpado

Post on 26-Jun-2015

122 views

Category:

Technology


2 download

DESCRIPTION

Breve abordagem sobre o que é, o presente e o futuro do BI (Business Intelligence) o que nos remete a uma breve abordagem sobre o que vem a ser o BIGDATA e suas aplicações na sociedade. Mostrando algumas limitações exixtentes na BI tradicional. Tratou-se de uma aula magna com estudantes da UNIA- Univesidade Independente de Angola.

TRANSCRIPT

Page 1: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

Actualidade e Futuro do BI

Luanda, Outubro de 2013

José Alexandre

Aula Magna

UNIAUniversidade Independente de

Angola

U.A.N

Page 2: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

Alguns dados meus• Algumas Responsabilidades Atuais

• Director Técnico da empresa HiperSoft Tecnology Lda • Docente do Departamento de Engenharia Informática da UAN• Consultor de Desenvolvimento Aplicativos e OpenSoftware da PROSIST • Membro Efectivo da Sociedade Brasileira de Computação -SBC• Membro da CAFA e Ex-Representante da mesma , em LINS-SP

• Graduação• Tecnologia em Análise e desenvolvimento de Sistemas, pela UNILINS, São Paulo• Sistemas de Informação, pela UNILINS, São Paulo• Engenharia Informática, pela UAN, Luanda

• Pós Graduação• Engenharia de Componentes usando Java, pela FIOS, São Paulo

• Extensão universitária• Supply Chain management –Cadeia Logistica , pela FGV, São Paulo

• Mestrando• Direcção em Marketing Digital, pela IEP, Madrid

Page 3: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 4: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

História - Business IntelligenceSurgiu a milhares de anos atrás (Persas, Egípcios e outros povos.);

Cruzavam informações provenientes da natureza;Períodos de chuvas, comportamento dos mares, etc.Para tomarem decisões;

Uma referência anterior : Sun Tzu - A Arte da Guerra;Deter todo o conhecimento de suas fraquezas e virtudes, além de todo o conhecimento das fraquezas e virtudes do inimigo; A falta deste conhecimento pode resultar na derrota;

Como conhecemos, surgiu na década de 70/80;Problemas

Faltava poder de processamento;Não existiam Banco de dados;Ainda não existia interfaces desktop;

Termo foi cunhado pelo Gartner em 1992;Antes disso já existiam outros termos (Olap, DW, etc);

Page 5: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

Inteligência empresarial (Business Intelligence)

refere-se ao processo de coleta, organização, análise, compartilhamento e monitoramento de informações que oferecem suporte a gestão de negócios.

é um termo do Gartner Group. O conceito surgiu na década de 80 e descreve as habilidades das corporações para aceder a dados e explorar informações (normalmente contidas em um Data Warehouse/Data Mart), analisando-as e desenvolvendo percepções e entendimentos a seu respeito, o que lhes permite incrementar e tornar mais pautada em informações a tomada de decisão.

Wikipedia

Page 6: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

● Características– Extrai e integra dados de múltiplas fontes;

– Fazer uso da experiência (dados históricos);

– Analisa dados contextualizados;

– Trabalha com hipóteses;

– Procura relações de causa e efeito;

– Transformar os registros obtidos em informação útil para o conhecimento empresarial;

– Conceitos de BI são aplicáveis a todo tipo de empresa, independente de seu porte, faturamento ou segmento.

Page 7: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

Como funciona o BI

Page 8: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

Data Warehouse

DefiniçãoSegundo Inmon, Data Warehouse é uma coleção de dados orientados por assuntos, integrados, variáveis com o tempo e não voláteis, para dar suporte ao processo de tomada de decisão;

Kimball define assim: é um conjunto de ferramentas e técnicas de projeto, que quando aplicadas às necessidades específicas dos usuários e aos bancos de dados específicos permitirá que planejem e construam um data warehouse.

Page 9: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

ETL

Extração, transformação e carga;

Ambientes heterogêneos;

Várias fontes de dados;

Etapa bastante demorada;

Realizado “fora de hora”;

Fase mais crítica;

Page 10: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 11: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

OLAP (On-Line Analytical Processing)

Forma alternativa de tratamento da informação,

Processamento de dados,

Dedicado ao suporte a decisão,

Por meio de visualização de dados agregrados ao longo de várias dimensões analíticas (tempo, espaço, categoria de produto, quantidade vendida, preço...),

Hierarquizadas em várias granularidades,

Armazenados em BD especializadas,

Seguindo um modelo lógico de dados multidimensional,

Page 12: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

Operacional e analítico

O processo operacional tem funções limitadas, que são implementadas e oferecidas de acordo com a política da empresa. Também chamado de OLTP (on-line transaction processing)

• Ex. Relatório de resultados financeiros

O processamento analítico é em essência não limitado, permitindo a criatividade das pessoas envolvidadas. Também é chamado de OLAP (on-line analytical Processing)

• Ex. Relatório indicando desempenho comparativo ao do último mês, mesmo mês do ano anterior ou a seis meses atrás

Page 13: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 14: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 15: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 16: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 17: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

A população mundial é estimada em 7 bilhões de pessoas

http://www.census.gov/popclock/

Page 18: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 19: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 20: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

http://www.techzine.com.br/arquivo/voc-sabe-quanto-vale-1-zettabyte/

Page 21: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 22: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 23: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 24: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 25: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 26: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 27: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 28: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 29: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

O mercado de big data já movimenta 26 bilhões de dólares em todo o mundo. Das 500 maiores companhias globais, 450 têm projetos nessa área. Como a partir de agora empresas de menor porte devem passar a usar essa ferramenta, estima-se que o mercado de big data chegue a 38 bilhões de dólares em 2015.

http://exame.abril.com.br/revista-exame/edicoes/1025/noticias/para-nao-se-afogar-em-numeros?page=3

Page 30: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

http://computerworld.uol.com.br/negocios/2013/03/15/negocios-na-era-do-big-data/

Page 31: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 32: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 33: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 34: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 35: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 36: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

Fluxo de informação, mapa mundi a noite

Page 37: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

Fluxo de informação, mapa mundi Facebook

Page 38: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

Fluxo de informação, mapa mundi Twitter

Page 39: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

Fluxo de informação, mapa mundi tráfego aéreo

Page 40: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

Quantos bytes cada um de nós produz por dia? Quantos bytes já produzimos em toda a nossa vida?

Tudo isso gera um banco de dados mundial.

Page 41: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

2020 previsão de 40 zettabytes

Page 42: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

Em Los Angeles, um notável experimento está em andamento, a polícia está tentando prever os crimes, antes mesmo de que eles aconteçam.

Page 43: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

O conceito Big Data pode ser resumidamente definido como

uma coleção de bases de dados tão complexa

e volumosa que se torna muito difícil e complexa fazer algumas

operações simples (remoção, ordenação, sumarização) de

forma eficiente utilizando Sistemas Gerenciadores de

Bases de Dados tradicionais.

Page 44: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

É um termo usado para descrever o crescimento, a

disponibilidade e o uso exponencial de informações

estruturadas e não estruturadas.

Page 45: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

Em uma linguagem técnica, Big Data é definido como o conjunto

de soluções tecnológicas capazes de lidar com dados

digitais em:

Page 46: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 47: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

Na prática, esta tecnologia permite analisar qualquer tipo

de informação digital em tempo real, sendo fundamental para a

tomada de decisões.

Page 48: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

Internet das coisas:Cada objeto poderá ter o seu IP.

Roupas, carros, geladeiras, bolsas, etc com chips

inteligentes que geram dados do seu comportamento e

experiência o tempo todo.

Page 49: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

Plataformas utilizadas mundialmente:

Hadoop é uma plataforma de software em Java de computação distribuída voltada para clusters e processamento de grandes massas

de dados.MongoDB (do "humongous") é

uma aplicação de código aberto, de alta performance, sem esquemas,

orientado a documentos.

Page 50: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

Breve demo prática do Mongodb

http://www.mongodb.com/solutions/big-data

Page 51: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

Big Data ajudouObama a ganhar eleições

Page 52: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

Na Amazon, vender produtos é apenas

Uma questão de catalisar dados, percebemos que o negócio da Amazon na verdade é Big

Data.Confira em Amazon Web Services

http://aws.amazon.com/pt/big-data/

Page 53: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 54: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

Big data tornou-se ferramenta essencial não só para os

departamentos de tecnologia e análise das empresas, mas também

para as áreas de marketing, negócios e relacionamento, uma vez

que precisam entender não só o perfil do consumidor, mas seu

comportamento nas redes sociais, hábito de consumo, intenção de compras, relevância e influência.

Page 55: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

Empresas que trabalham com grande número de clientes precisam analisar uma grande quantidade de informações em tempo real e tomar decisões que afetam os negócios e a

concorrência.

Page 56: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

Como a NSA consegue espionar milhões de pessoas nos EUA?

A Agência de Segurança Nacional americana montou um gigantesco

esquema para bisbilhotar as comunicações nos Estados Unidos e

em outros países.

Page 57: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

A questão “não” são os dados, mas o que você faz com eles.

Page 58: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

“O big data não faz milagre”Para uma das maiores autoridades

em big data, o americano Peter Hirshberg, as ferramentas que

analisam grandes volumes de dados, essa tecnologia fará parte da vida de todas as empresas desde que haja

gente que saiba usá-la.

Page 59: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

“O big data precisa de pessoas qualificadas nesta nova área”

Em Angola criará uma preocupação para...

Page 60: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

MAPTESS

CINFOTEC

EMPRESAS

Universidades e demais entidades

Page 61: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

“Como andam e como ficarão os lideres de topo nas empresas ?”

Page 62: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

O temos hoje o CEO “CEU”

Page 63: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 64: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

O CEO dará espaço para o CIO “cio”

Page 65: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 66: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 67: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 68: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 69: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 70: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

Até já tem simpósio próprio

Page 71: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

Seus outros nomes...

Page 72: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola
Page 74: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

http://mundodosdocs.com/docmentarios/politica/bbc-a-era-dos-grandes-dados-bbc-the-age-of-big-data/?utm_source=rss&utm_medium=rss&utm_campaign=bbc-a-era-dos-grandes-dados-bbc-the-age-of-big-data

http://www1.folha.uol.com.br/mercado/1200232-empresas-aproveitam-so-05-dos-dados-gerados-no-mundo-digital.shtml

http://www.planejamentodevendas.com.br/gestao-comercial/o-que-e-big-data/

http://www.techzine.com.br/arquivo/voc-sabe-quanto-vale-1-zettabyte/

http://info.abril.com.br/noticias/ti/big-data-ajudou-obama-a-ganhar-eleicoes-15012013-25.shl

http://public.dhe.ibm.com/common/ssi/ecm/en/iml14296usen/IML14296USEN.PDF

http://www.flightradar24.com/

http://brazil.emc.com/campaign/global/big-data/hfbd-infographic-4web-1500.jpg?cmp=micro-big_data-general-emc

http://www.youtube.com/watch?v=LsMt5jp1a9k

http://exame.abril.com.br/tecnologia/noticias/painel-discute-big-data-e-o-consumidor-nas-redes-sociais

http://exame.abril.com.br/tecnologia/noticias/como-a-nsa-consegue-espionar-milhoes-de-pessoas-nos-eua?page=1

http://exame.abril.com.br

http://www.google.com/url?q=http%3A%2F%2Fwww.bigdatabrasil.net%2F&sa=D&sntz=1&usg=AFQjCNE_NrI3OTBYEydhru3p_0cWukbvFw

Referências

Page 75: Aula Magna Sobre BI & BigData na UNIA, Luanda - Angola

http://globotv.globo.com/globo-news/manhattan-connection/v/livro-big-data-mostra-o-perigo-da-revolucao-digital/2465167/

http://www1.folha.uol.com.br/mercado/1200232-empresas-aproveitam-so-05-dos-dados-gerados-no-mundo-digital.shtml

http://tecnologia.terra.com.br/internet/universo-paralelo-do-big-data-traz-medos-e-surpresas,f97bfe32cdbda310VgnCLD200000bbcceb0aRCRD.html

http://exame.abril.com.br/revista-exame/edicoes/1025/noticias/para-nao-se-afogar-em-numeros?page=2

http://data.ime.usp.br/sbbd2012/artigos/pdfs/sbbd_min_01.pdf

http://www.walmartlabs.com/

http://exame.abril.com.br/revista-exame/edicoes/1025/noticias/para-nao-se-afogar-em-numeros?page=3

http://www.slideshare.net/carlosalbertops/big-data-23110598

http://www.slideshare.net/alexculpado/savedfiles?s_title=big-data-17675968&user_login=VivaldoJoseBreternitz

http://www.slideshare.net/laodias/os-cinco-vs-do-big-data?from_search=12