uma nova organização para big data
DESCRIPTION
Qual a principal diferença entre Data Warehouse (DW) e Big Data? O DW é utilizado para melhorar as tomadas de decisão e o Big Data é usado para a inovação. As empresas terão que tomar a decisão de dividir seus sistemas de informação no médio prazo. Uma para atender aos processos operacionais tradicionais e outra para atender a demanda por inovação. Os sistemas atuais não estão preparados para analisar o volume dados gerados pelas redes sociais e sensores da Internet da Coisas (Internet of Things, IoT). Será necessário criar uma nova organização exclusiva e independente da tradicional TI para analisar dados e propor novos produtos e serviços baseados no Big Data. Essa nova organização terá como principal característica uma equipe de pessoas inteligentes e espertas, smart people.TRANSCRIPT
Uma nova organização para Big Data
Eduardo Mayer FagundesAgosto/2014 – São Paulo
DATA CENTER INFRA BRASIL 2014
Organização típica de uma empresa
Produto
Recursos HumanosTecnologia da Informação
JurídicoControle Internos
DATA CENTER INFRA BRASIL 2014
Organização de TI Tradicional
InformaçõesProcessos
Planejamento e Organização(RH, Alinhamento com o Negócio, Arquitetura de
TI, Análise de Risco, Budget, Escritório de Projetos)
Desenvolvimento, aquisição e implementação(CMMI, Fábrica de Software, Banco de Dados,
Biblioteca de Objetos, Testes)
Suporte e Operação(ISO 20.000, ITIL, ISO 27.000, ISO 50.001,
DCIM, Infraestrutura do Data Center)
Controle(Self-assessment para auditorias, Qualidade, Melhoria Contínua)
DATA CENTER INFRA BRASIL 2014
Novos Desafios
BIG DATAINTERNET of
THINGS
CLOUD
COMPUTING
DATA CENTER INFRA BRASIL 2014
Internet of Things (IoT)
Etiquetas RFID para facilitar rotas, inventário e evitar perdas de encomendas
Vigilância, segurança, saúde, transporte, segurança alimentar, gestão de documentos
Localização de pessoas e objetos do dia a dia
Teleoperação e telepresença: habilidade para monitorar e controlar objetos distantes
Demandas para expedição logística
Redução de custos pela difusão da 2ª. onda de aplicações
Habilidade dos dispositivos “indoor” para receber sinais de geolocalização
Miniaturização, eficiência energética e disponibilidade de espectro de frequência
Agentes de software e sensores avançados
2000 2010 2020 Tempo
Alcance da Tecnologia
Fonte: SRI Consulting Business Intelligence
Auxiliar na Cadeia de Fornecedores
Aplicações no mercado
Posicionamento omnipresente
Mundo físico da Web
ROTEIRO DA TECNOLOGIA: INTERNET DAS COISAS
DATA CENTER INFRA BRASIL 2014
Internet of Things
• O compactador aumenta a capacidade de armazenagem em até 8 vezes
• Notifica quando é necessária a coleta
• Reduz em até 80% as coletas• Solução como Serviço
DATA CENTER INFRA BRASIL 2014
Big Data
Camada de Apresentação
Tecnologia de Big Data
Plataforma Infraestrutura
API API
Apache Cassandra
Apache Hadoop
Outros
Processamento Rede Armazenamento
Serviços de Compartilhamento
Sistema Operacional & Hypervisor
Hardware Commodity
Ferramentas de Análise
Ferramentas de Controle
Monitoração da capacidade e auto provisionamento dos recursos da infraestrutura
Argumentos de Pesquisa
DATA CENTER INFRA BRASIL 2014
Big Data
Pesquisa
RESULTADOHADOOP MAPREDUCE
DATA CENTER INFRA BRASIL 2014
Big Data
Análises e Relatórios Rápidos
Análise de Comportamento dos
Clientes
Tendência de Comportamento
dos Clientes
Análise das redes sociais
Aumento da eficiência das campanhas
Campanhas mais eficientes
Tendência de Comportamento
dos ClientesMARKETING
Alta disponibilidade
Análise dos dados da máquina
Análise dos dados da máquina
Armazenamento e Monitoração
Simplificação do Gerenciamento dos
dados
Simplificação do Gerenciamento
dos dados
Simplificação do Gerenciamento
dos dadosINFRAESTRUTURA
Previsão do Comportamento dos Clientes
Previsão do Comportamento dos
Clientes
Redução de custo dos recursos
PRIORIDADE
Fluxo de dados em tempo real
Fluxo de dados em tempo real
Integração empresarial
Fluxo de dados em tempo real
Análise com Hadoop
Rápido desenvolvimento e
implantação
Integração empresarial
Detecção de ameaças e fraudesDetecção de
ameaças e fraudes Redução de custo
dos recursos
Governança e Gestão de Riscos
Previsibilidade
Governança e Gestão de Riscos
Redução de custo dos recursos
TI
FINANÇAS
Fonte: IBM
DATA CENTER INFRA BRASIL 2014
ETL – Extract, Transformation, Load
Integração do Sistema Elétrico
DATA CENTER INFRA BRASIL 2014
Big Data
Em média cada empregado possui entre 3 e 5 equipamentos para acessar os dados corporativos no data center (desktop, notebook, tablet, smartphone, PDV, celulares);
De acordo com a IBM, 90% dos dados armazenados nos data centers foram criados nos últimos dois anos;
Em 2012, mais de 250 terabytes foram coletados pela Biblioteca do Congresso dos Estados Unidos;
O Facebook processa 300 milhões de fotos por dia e cerca de 105 terabytes de dados a cada 30 minutos;
O Facebook armazena 100 petabytes de dados em um Hadoop disk cluster;
O Governo americano elegeu o Big Data como uma das cinco iniciativas para alavancar o crescimento da economia (Gás de Xisto; Inteligência embarcada nos produtos; Big Data; Infraestrutura pública; e, ensino fundamental);
Em 2012, o governo Obama anunciou investimentos de US$200 milhões em projetos de pesquisa em Big Data;
O IDC projeta que o mercado de Big Data crescerá de US$3,2 bilhões para US$32,4 bilhões em 2017.
Fonte: InformationWeek, 28-1-2014
DATA CENTER INFRA BRASIL 2014
Cloud Computing
DATA CENTER INFRA BRASIL 2014
Organização para Big Data
Gerente Big Data
Internet of Thing
Hadoop
Cloud Computing
Gerente Área de Negócio
Gerente Área de Negócio
Gerente TI
DATA CENTER INFRA BRASIL 2014
Organização para Big Data
Produto
Recursos HumanosTecnologia da Informação
JurídicoControle Internos
BIG DATA
DATA CENTER INFRA BRASIL 2014
