integração de dados astronômicos vinícius p. freire josé macedo fábio porto

Integração de Dados Astronômicos

Vinícius P. FreireJosé MacedoFábio Porto

1º Seminário de Pesquisa DEXL 212/6/2012

1º Seminário de Pesquisa DEXL 3

Hipparchus de Rhodes

• Segundo século a.C.• Mapa do céu• Descoberta– Deslocamento dos astros– Uma das maiores descobertas da astronomia– Graças ao seu mapa.

12/6/2012

1º Seminário de Pesquisa DEXL 4

Nos dias atuais

• Novas descobertas– Quasares• Tamanho do sistema solar• Mais brilhantes do que uma galáxia inteira• São os mais distantes do Universo

• Construção do mapa de todo o Universo– Poderá esclarecer as origens do Universo

12/6/2012

1º Seminário de Pesquisa DEXL 5

O que seria mapear todo o Universo?

• Medir posições e propriedades de todas as centenas de milhões de objetos celestes que um telescópio possa observar de forma adequada.– Mede as posições de forma bastante precisa• Distancias• Figura tridimensional

– Mapa do céu: diz onde olhar para encontrar

12/6/2012

1º Seminário de Pesquisa DEXL 6

Telescópio SDSS

12/6/2012

1º Seminário de Pesquisa DEXL 7

O que é um Catálogo?

Levantamento Espectrópico:

12/6/2012

1º Seminário de Pesquisa DEXL 8

Catálogos

12/6/2012

1º Seminário de Pesquisa DEXL 9

Integração de Dados

12/6/2012

1º Seminário de Pesquisa DEXL 10

Algoritmos

12/6/2012

1º Seminário de Pesquisa DEXL 11

International Virtual Observatory Alliance (IVOA)

12/6/2012

1º Seminário de Pesquisa DEXL 12

Arquitetura Virtual Observatory

12/6/2012

1º Seminário de Pesquisa DEXL 13

Problema Inicial

• Como construir uma visão linked data de huge database? -> Bilhões de objetos

12/6/2012

14

Proposta Inicial

• Construir uma visão integrada usando visões linked data;

• Materializar relacionamentos “sameAs” entre objetos, de acordo com os algoritmos de matching;

• Combina:– Representação do grafo

• sameAs

– Visão linked data de catálogos• Banco de dados relacional

1º Seminário de Pesquisa DEXL12/6/2012

1º Seminário de Pesquisa DEXL 15

Integração

12/6/2012

Céu com todos os objetos

1º Seminário de Pesquisa DEXL 16

Diferença quanto a integração de BD tradicional

• Volume de dados (huge); • Schema+instance;• “Same-as" + catalogos complementando

dados;• Integrar mapas com atributos contendo

valores diferentes (erro).

12/6/2012

1º Seminário de Pesquisa DEXL 17

Problemas a Tratar• Matching de Instâncias

– Estático / Móvel– Validar os catálogos– Astros e componentes de astros– Funções de Similaridade

• Matching de Schemas– Criação do Modelo Conceitual

• Integração Espacial– Mapas Diferentes

• Como processar consultas de integração nesse contexto– Impacto do grafo de same-as– Impacto do aspecto espacial (ra, dec);– Como particionar grafo + catálogos12/6/2012

1º Seminário de Pesquisa DEXL 18

O que pode nos auxiliar?

• Q3C – Sky Indexing Scheme– Implementação PostgreSQL

12/6/2012

1º Seminário de Pesquisa DEXL 19

Cross-matching usando Q3C

• Cross-match de usnob com a tabela 2mass erro de raio de 1 arcsec (0.00027◦).

SELECT * from 2mass, usnob WHERE q3c join(2mass.ra, 2mass.dec, usnob.ra, usnob.dec, 0.00027);

12/6/2012

1º Seminário de Pesquisa DEXL 20

Passos a curto prazo

• Qualificação– Integração de Dados– Armazenamento de Grandes Grafos– Integração de Dados Astronômicos

• Teste da ferramenta GAVO DaCHS.– Pode ajudar na integração dos catálogos

12/6/2012

1º Seminário de Pesquisa DEXL 2112/6/2012