explosao de dados e o conceito de análise de dados relacionados para geração de informações -...

Download Explosao de dados e o conceito de análise de dados relacionados para geração de informações - big data

Post on 05-Dec-2014

131 views

Category:

Data & Analytics

6 download

Embed Size (px)

DESCRIPTION

O objetivo deste presente trabalho é apresentar inicialmente a evolução da tecnologia e dos dados que ocorreram nos últimos cinco anos, mostrando o salto tecnológico criado pela polêmica Web 2.0, pesquisas e previsões em relação ao crescimento dos dados e como surgiram as redes sociais, gerando assim um aumento dos dispositivos móveis e novos tipos de dados desestruturados. Esta monografia apresenta o que é o Big Data, onde o mesmo é um conceito da análise de dados relacionados na web para geração de valor, quais são seus aspectos, ciclos e arquitetura de gerenciamento, exemplificando seu funcionamento, quais os conceitos necessários e tecnologias disponíveis para sua aplicação na nuvem, e alguns serviços oferecidos para dar suporte ao Big Data como armazenamento e gerenciamento dos dados. Para finalizar este trabalho, é feita a apresentação de algumas ferramentas mais utilizadas no ambiente tecnológico do Big Data e alguns exemplos de aplicação deste conceito no meio organizacional apresentando seus benefícios.

TRANSCRIPT

  • 1. ESTADO DE MATO GROSSO SECRETARIA DE ESTADO DE CINCIAS, TECNOLOGIA E EDUCAO SUPERIOR UNIVERSIDADE DO ESTADO DE MATO GROSSO FACULDADE DE CINCIAS EXATAS CAMPUS UNIVERSITRIO DE BARRA DO BUGRES DEPARTAMENTO DE CINCIA DA COMPUTAO FELIPE ARGENTON PEREIRA EXPLOSO DOS DADOS E O CONCEITO DE ANLISE DE DADOS RELACIONADOS PARA GERAO DE INFORMAES (BIG DATA) BARRA DO BUGRES MT 2013
  • 2. FELIPE ARGENTON PEREIRA EXPLOSO DOS DADOS E O CONCEITO DE ANLISE DE DADOS RELACIONADOS PARA GERAO DE INFORMAES (BIG DATA) Monografia apresentada ao Departamento de Cincia da Computao, da Universidade do Estado do Mato Grosso, Campus Universitrio Dep. Estadual Rene Barbour, como requisito para a obteno do ttulo de Bacharel em Cincia da Computao sob orientao do Prof. MSc. Luciano Zamperetti Wolski. BARRA DO BUGRES 2013
  • 3. FELIPE ARGENTON PEREIRA EXPLOSO DOS DADOS E O CONCEITO DE ANLISE DE DADOS RELACIONADOS PARA GERAO DE INFORMAES (BIG DATA) Banca Examinadora ____________________________________________ Prof. MSc. Luciano Zamperetti Wolski Orientador ____________________________________________ Prof. MSc. Luciano Barco Convidado ____________________________________________ Prof. Esp. Alexandre Berndt Indicado pelo Departamento Barra do Bugres/MT, __ de Dezembro de 2013
  • 4. DEDICATRIA Dedico este trabalho primeiramente Deus, que sabe de todas as coisas e aos meus pais Nelson Pereira e Sandra Mara Pereira que fizeram tudo para minha formao e tornaram possvel esta etapa da minha vida. Tambm dedico este trabalho todas as pessoas que amam tecnologia e que desejam fazer do mundo um lugar melhor.
  • 5. AGRADECIMENTOS Agradeo primeiramente a Deus que me permitiu completar mais esta etapa da minha vida, e que tem me abenoado com sabedoria. Agradeo a minha famlia por me darem suporte e motivao a continuar, mesmo nos momentos de dificuldade, eles estiveram l, garantindo minha formao. Agradeo tambm a todos os meus amigos, Marlon A. V. de Lima, Diego Lima, Anna Letcia, Marcell Duarte, Lizandra Carla, Joice M. Derlan, Arilda Riboski e muitos outros que me acompanharam e me ajudaram neste perodo. Agradecimento especial ao professor e orientador Luciano Z. Wolski e professora Raquel S. V. Coelho, que muito me auxiliou neste projeto.
  • 6. RESUMO O objetivo deste presente trabalho apresentar inicialmente a evoluo da tecnologia e dos dados que ocorreram nos ltimos cinco anos, mostrando o salto tecnolgico criado pela polmica Web 2.0, pesquisas e previses em relao ao crescimento dos dados e como surgiram as redes sociais, gerando assim um aumento dos dispositivos mveis e novos tipos de dados desestruturados. Esta monografia apresenta o que o Big Data, onde o mesmo um conceito da anlise de dados relacionados na web para gerao de valor, quais so seus aspectos, ciclos e arquitetura de gerenciamento, exemplificando seu funcionamento, quais os conceitos necessrios e tecnologias disponveis para sua aplicao na nuvem, e alguns servios oferecidos para dar suporte ao Big Data como armazenamento e gerenciamento dos dados. Para finalizar este trabalho, feita a apresentao de algumas ferramentas mais utilizadas no ambiente tecnolgico do Big Data e alguns exemplos de aplicao deste conceito no meio organizacional apresentando seus benefcios. Palavras-chave: Exploso de dados, NoSQL, Big Data, Cloud Computing.
  • 7. ABSTRACT This present college paper has the objective initially to show the technology and data evolution that occurred in the last five years showing the technological leap created by controversy Web 2.0, researchs and forecasts regarding data growth, how social networks have emerged thus generating an increase of mobile devices and new types of unstructured data. This paper presents what is Big Data, where its a concept of analysis of related data on the web to creation of value, what are their aspects, cycles and management architecture, exemplifying its operation, which the necessary concepts and technologies available for your application in the cloud, and some services offered to support Big Data as storage and data management. To conclude this work, is made the presentation of some of the most used tools in the technological environment of the Big Data and some application examples of this concept in the organizational environment showcasing its benefits. Keywords: Data Explosion, NoSQL, Big Data, Cloud Computing.
  • 8. LISTA DE FIGURAS Figura 1 Ciclo de gerenciamento do Big Data ........................................................... 19 Figura 2 Arquitetura do Big Data .............................................................................. 20 Figura 3 Tpico ambiente de virtualizao ................................................................ 28
  • 9. SUMRIO INTRODUO ................................................................................................................................................ 10 CAPTULO I ..................................................................................................................................................... 12 1 EXPLOSO DOS DADOS ................................................................................................................ 12 1.1 Pesquisas e previses ............................................................................................................................. 14 1.2 Mdias sociais .......................................................................................................................................... 15 1.3 Dados desestruturados ......................................................................................................................... 15 1.4 NoSQL ..................................................................................................................................................... 16 1.5 Marketing Social .................................................................................................................................... 17 CAPITULO II ................................................................................................................................................... 18 2 ANLISE DE DADOS RELACIONADOS PARA GERAO DE INFORMAES ... 18 2.1 Os trs vs ................................................................................................................................................ 18 2.2 Ciclo de gerenciamento ........................................................................................................................ 19 2.3 Arquitetura de gerenciamento ........................................................................................................... 20 2.3.1 Interfaces e feeds ..................................................................................................................................... 21 2.3.2 Infraestrutura Fsica Redundante ....................................................................................................... 21 2.3.3 Infraestrutura de segurana ................................................................................................................. 22 2.3.4 Banco de Dados operacionais ............................................................................................................... 23 2.3.5 Organizar Banco de Dados e ferramentas ......................................................................................... 24 2.3.6 Anlises de Data Warehouses e Data Marts ...................................................................................... 24 2.3.7 Analytics (anlise de Big Data) ............................................................................................................. 25 2.3.8 Aplicaes de Big Data .......................................................................................................................... 26 2.4 Virtualizao ........................................................................................................................................... 27 2.4.1 Virtualizao de servidores .................................................................................................................... 29 2.4.2 Virtualizao da infraestrutura de aplicao ..................................................................................... 29 2.4.3 Virtualizao do processador ................................................................................................................ 30 2.4.4 Virtualizao de dados e armazenamento .......................................................................................... 30 2.5 Abstrao e virtualizao ..........................................................................................................

Recommended

View more >