integração de dados astronômicos vinícius p. freire josé macedo fábio porto
TRANSCRIPT
Integração de Dados Astronômicos
Vinícius P. FreireJosé MacedoFábio Porto
1º Seminário de Pesquisa DEXL 212/6/2012
1º Seminário de Pesquisa DEXL 3
Hipparchus de Rhodes
• Segundo século a.C.• Mapa do céu• Descoberta– Deslocamento dos astros– Uma das maiores descobertas da astronomia– Graças ao seu mapa.
12/6/2012
1º Seminário de Pesquisa DEXL 4
Nos dias atuais
• Novas descobertas– Quasares• Tamanho do sistema solar• Mais brilhantes do que uma galáxia inteira• São os mais distantes do Universo
• Construção do mapa de todo o Universo– Poderá esclarecer as origens do Universo
12/6/2012
1º Seminário de Pesquisa DEXL 5
O que seria mapear todo o Universo?
• Medir posições e propriedades de todas as centenas de milhões de objetos celestes que um telescópio possa observar de forma adequada.– Mede as posições de forma bastante precisa• Distancias• Figura tridimensional
– Mapa do céu: diz onde olhar para encontrar
12/6/2012
1º Seminário de Pesquisa DEXL 6
Telescópio SDSS
12/6/2012
1º Seminário de Pesquisa DEXL 7
O que é um Catálogo?
Levantamento Espectrópico:
12/6/2012
1º Seminário de Pesquisa DEXL 8
Catálogos
12/6/2012
1º Seminário de Pesquisa DEXL 9
Integração de Dados
12/6/2012
1º Seminário de Pesquisa DEXL 10
Algoritmos
12/6/2012
1º Seminário de Pesquisa DEXL 11
International Virtual Observatory Alliance (IVOA)
12/6/2012
1º Seminário de Pesquisa DEXL 12
Arquitetura Virtual Observatory
12/6/2012
1º Seminário de Pesquisa DEXL 13
Problema Inicial
• Como construir uma visão linked data de huge database? -> Bilhões de objetos
12/6/2012
14
Proposta Inicial
• Construir uma visão integrada usando visões linked data;
• Materializar relacionamentos “sameAs” entre objetos, de acordo com os algoritmos de matching;
• Combina:– Representação do grafo
• sameAs
– Visão linked data de catálogos• Banco de dados relacional
1º Seminário de Pesquisa DEXL12/6/2012
1º Seminário de Pesquisa DEXL 15
Integração
12/6/2012
Céu com todos os objetos
1º Seminário de Pesquisa DEXL 16
Diferença quanto a integração de BD tradicional
• Volume de dados (huge); • Schema+instance;• “Same-as" + catalogos complementando
dados;• Integrar mapas com atributos contendo
valores diferentes (erro).
12/6/2012
1º Seminário de Pesquisa DEXL 17
Problemas a Tratar• Matching de Instâncias
– Estático / Móvel– Validar os catálogos– Astros e componentes de astros– Funções de Similaridade
• Matching de Schemas– Criação do Modelo Conceitual
• Integração Espacial– Mapas Diferentes
• Como processar consultas de integração nesse contexto– Impacto do grafo de same-as– Impacto do aspecto espacial (ra, dec);– Como particionar grafo + catálogos12/6/2012
1º Seminário de Pesquisa DEXL 18
O que pode nos auxiliar?
• Q3C – Sky Indexing Scheme– Implementação PostgreSQL
12/6/2012
1º Seminário de Pesquisa DEXL 19
Cross-matching usando Q3C
• Cross-match de usnob com a tabela 2mass erro de raio de 1 arcsec (0.00027◦).
SELECT * from 2mass, usnob WHERE q3c join(2mass.ra, 2mass.dec, usnob.ra, usnob.dec, 0.00027);
12/6/2012
1º Seminário de Pesquisa DEXL 20
Passos a curto prazo
• Qualificação– Integração de Dados– Armazenamento de Grandes Grafos– Integração de Dados Astronômicos
• Teste da ferramenta GAVO DaCHS.– Pode ajudar na integração dos catálogos
12/6/2012
1º Seminário de Pesquisa DEXL 2112/6/2012