![Page 1: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/1.jpg)
Reconstrução de cenas a partir de imagens através de Escultura do Espaço por
Refinamento Adaptativo por
Anselmo A. Montenegro
Tese de doutorado
Orientadores: Marcelo Gattass, PUC-Rio Paulo Cezar Carvalho, IMPA
![Page 2: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/2.jpg)
Roteiro
• Introdução• Trabalhos anteriores• Processamento no espaço das imagens• Processamento no espaço da cena• O método proposto• Implementação do sistema• Resultados• Conclusões e trabalhos futuros
![Page 3: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/3.jpg)
Motivação básica
• Cenários virtuais• Telepresença• Jogos• Engenharia: “As-built” models
Um sistema de modelagem de objetos baseado em câmeras e computadores pessoais para dar suporte a atividades como:
![Page 4: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/4.jpg)
Reconstrução por superfícies
Cena reconstruída
Texturização
Estruturação
Registro
Aquisição de dados
![Page 5: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/5.jpg)
Reconstrução Volumétrica
Características:– Representa a cena através de uma subdivisão
volumétrica do espaço.– Não requer a solução explícita do problema de
correspondências.– A solução é obtida através da satisfação de
restrições.– Subdivide-se em duas classes:
• Métodos baseados em silhuetas.• Métodos baseados em foto-consistência.
![Page 6: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/6.jpg)
Reconstrução Volumétrica
![Page 7: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/7.jpg)
• Reconstrução volumétrica através de silhuetas:–Primeiro método de reconstrução volumétrica. –Procura estimar o Visual Hull:
forma que quando visualizada reproduz as silhuetas observadas
–Aproximado através de interseções de cones volumétricos.–Não captura formas com curvatura negativa.
Reconstrução Volumétrica
![Page 8: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/8.jpg)
• Reconstrução baseada em critérios de foto-consistência:– Baseia-se na existência de coerência das cores geradas pelos
pontos da cena em cada uma das imagens. – Não requer uma segmentação explícita da cena em fundo e
objeto.– Exemplos:
• Coloração de voxels (Seitz e Dyer 1997/1999).• Escultura do espaço (Kutulakos e Seitz 2000).
– Assume que a iluminação é localmente computável.
Reconstrução Volumétrica
![Page 9: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/9.jpg)
Reconstrução Volumétrica: cronologia
Interseções entre
Superfícies
Martin e Aggarwal (83)
Representações por octrees
Chien(84, 85), Potmesil(87), Szeliski(93)
Representações por voxels
Massone(85), Fromhertz(94,95) e Moezzi(96, 97)
Reconstrução baseada em silhuetas
Seitz e Dyer
(1997,1998)
Seitz e Kutulakos
(2000)
Variações
Reconstrução baseada em foto-consistência
![Page 10: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/10.jpg)
Escultura do espaço no espaço das imagens
![Page 11: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/11.jpg)
Imagem 1 Imagem 2 Imagem 3 Imagem 4 Estado
Segmentação objeto objeto objeto objeto OBJETO
Amostra/Visibilidade
VISÍVEL
Resultado combinado
NÃOCONSISTENTE
Exemplo 1: não-foto-consistência
Escultura do espaço no espaço das imagens
![Page 12: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/12.jpg)
Imagem 1 Imagem 2 Imagem 3 Imagem 4 Estado
Segmentação objeto objeto objeto objeto OBJETO
Amostra/Visibilidade
VISÍVEL
Resultado combinado X X CONSISTENTE
Exemplo 2: foto-consistência
Escultura do espaço no espaço das imagens
![Page 13: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/13.jpg)
Imagem 1 Imagem 2 Imagem 3 Imagem 4 Estado
Segmentação fundo objeto objeto objeto FUNDO
Amostra/Visibilidade X X X X XResultado combinado X X X X NÃO
CONSISTENTE
Exemplo 3: não-foto-consistência trivial
Escultura do espaço no espaço das imagens
![Page 14: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/14.jpg)
Imagem 1 Imagem 2 Imagem 3 Imagem 4 Estado
Segmentação objeto objeto objeto objeto OBJETO
Amostra/Visibilidade
NÃO VISÍVEL
Resultado combinado X X X X NÃO
CONSISTENTE
Exemplo 4: foto-consistência trivial
Escultura do espaço no espaço das imagens
![Page 15: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/15.jpg)
Escultura do espaço no espaço das imagens: problemas
Dificuldade de registro
Amostragem inadequada
Conseqüências:–Erros na avaliação de foto-consistência.
–Erros no tratamento das informações sobre a visibilidade dos voxels.
–Dificuldade de lidar com imagens em resoluções diferentes .
Solução: Processamento no espaço da cena.
Aproximação da reprojeção dos voxels
através de pontos
![Page 16: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/16.jpg)
![Page 17: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/17.jpg)
Escultura do espaço no espaço da cena• Estratégia:
– Registrar as informações relevantes nos planos de varredura (referência).
• Mecanismo utilizado:– Mapeamento projetivo de texturas.
• Vantagens:– Fácil registro.– Reamostragem correta.– Tratamento correto da visibilidade.– Possibilidade de programação em hardware.
![Page 18: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/18.jpg)
Escultura do espaço no espaço da cena
![Page 19: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/19.jpg)
Escultura do espaço no espaço da cena
![Page 20: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/20.jpg)
Imagens e segmentação
Mapas de visibilidade
Escultura do espaço no espaço da cena
![Page 21: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/21.jpg)
Imagens e segmentação
Mapas de visibilidade
amostra
Escultura do espaço no espaço da cena
![Page 22: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/22.jpg)
Imagem 1 Imagem 2 Imagem 3 Imagem 4 Estado
SegmentaçãoO O O O O F F O
FUNDOO F O O O O O O
AmostraX X X X X X X X
XX X X X X X X X
Resultado combinado
X X X X X X X X NÃOCONSISTENTEX X X X X X X X
Exemplo1: não-foto-consistência
Escultura do espaço no espaço da cena
![Page 23: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/23.jpg)
Imagem 1 Imagem 2 Imagem 3 Imagem 4 Estado
SegmentaçãoO O O O O O O O
FUNDOO O O O O O O O
AmostraVISÍVEL
Resultado combinado CONSISTENTE
X X X X
Exemplo 2: foto-consistência
Escultura do espaço no espaço da cena
![Page 24: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/24.jpg)
Proposta do trabalho: Escultura do espaço por refinamento adaptativo
• Motivação:– Não é possível conhecer a príncipio a resolução
adequada para a realização da reconstrução.– A representação do espaço através de partição
uniforme não é econômica.– Processo ineficiente: muitos elementos
individuais são avaliados de forma desnecessária.
![Page 25: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/25.jpg)
Escultura do espaço por refinamento adaptativo
• Objetivos:– Descartar grandes regiões vazias já nos
estágios iniciais do processo.– Concentrar esforços em regiões próximas à
superfície da cena.– Utilizar células de grande resolução
somente onde for necessário.
![Page 26: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/26.jpg)
• Estratégia:– Representar o espaço de reconstrução através de
subdivisão adaptativa: octrees. – Projetar as imagens de entrada em níveis de resolução
compatíveis com o nível de refinamento do espaço(uso de mipmapping).
– Aplicar uma etapa do algoritmo de varredura de planos para cada nível de refinamento.
– Utilizar as informações sobre a segmentação dos objetos de interesse para a remoção de espaços vazios.
– Trabalhos correlatos: Prock 1999 e Sainz 2002.
Escultura do espaço por refinamento adaptativo
![Page 27: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/27.jpg)
Escultura do espaço por refinamento adaptativo
![Page 28: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/28.jpg)
Escultura do espaço por refinamento adaptativo
• Varredura dos planos.– O número de planos de varredura depende somente
do nível de refinamento corrente da octree.– As células em cada plano de varredura podem ser
determinadas através da interseção do plano corrente com a octree.
– Em uma dada iteração são consideradas somente células não avaliadas.
![Page 29: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/29.jpg)
Escultura do espaço por refinamento adaptativo
![Page 30: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/30.jpg)
Escultura do espaço por refinamento adaptativo
![Page 31: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/31.jpg)
– Classificações para cada célula:• Foto-consistente.• Não-foto-consistente.• Indefinida.
– Célula indefinida:• Caso 1: célula mista (fundo/objeto).• Caso 2: célula intermediária com informação fotométrica incoerente.
– Célula não-foto-consistente:– Caso 1: célula de fundo.– Caso 2: célula de nível máximo com informação fotométrica
incoerente.
Escultura do espaço por refinamento adaptativo: classificação das células
![Page 32: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/32.jpg)
• É realizada com base em teste estatístico (determinar se as diferenças fotométricas são significantes, comparadas com o ruído).
• Deve levar em consideração os efeitos da filtragem sobre as imagens projetadas.
Escultura do espaço por refinamento adaptativo: avaliação da coerência fotométrica.
![Page 33: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/33.jpg)
Efeito da filtragem na foto consistência
![Page 34: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/34.jpg)
Sistema de aquisição
Calibração do fundo da cena
Calibração das câmeras
Captura das imagens
Segmentação dos objetos
Reconstrução por E.E.
![Page 35: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/35.jpg)
Dificuldades na calibração das câmeras
• Excesso de ruído nas imagens.• Necessidade de um método robusto.• Método utilizado: (Szenberg 2001).
– Baseado em reconhecimento de modelos.– Não requer que todas as feições sejam
identificadas nas imagens.
![Page 36: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/36.jpg)
Calibração das câmeras
Resultado da calibração
![Page 37: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/37.jpg)
Identificação do fundo da cena
• Necessária para a segmentação dos objetos de interesse.
• As imagens do fundo são modeladas através de intervalos de confiança para as médias dos valores observados nas componentes r, g e b de cada pixel.
• Feita em etapa de pré-processamento e pode usar um número grande de amostras (foram usadas 128 amostras, obtidas de 128 quadros).
![Page 38: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/38.jpg)
Captura das imagens e segmentação
• Cada imagem é obtida como uma média de vários quadros (foram usados quatro quadros).
• Os objetos de interesse são segmentados com base nos mapas de intervalos de confiança.
• Se o valores observados para um pixel estão dentro dos respectivos intervalos de confiança, o pixel é classificado como do fundo; senão, ele é considerado como pertencente aos objetos.
• Problemas: sombras e penumbras são consideradas como parte dos objetos.
![Page 39: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/39.jpg)
Captura das imagens e segmentação: tratamento de sombras
• Métodos baseados em correlação não conseguem corrigir problemas associados às sombras.
• Solução: teste com base em intervalos de confiança para os canais de cromaticidade.
![Page 40: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/40.jpg)
Testes: dado I – “Al”
![Page 41: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/41.jpg)
Testes: dado I – imagens segmentadas
![Page 42: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/42.jpg)
Testes: dado II – “Dolphins”
![Page 43: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/43.jpg)
Testes: dado II – imagens segmentadas
![Page 44: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/44.jpg)
Testes: dado III – “Tigre”
![Page 45: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/45.jpg)
Testes: dado III – imagens segmentadas
![Page 46: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/46.jpg)
Testes: dado III – “Tigre”
![Page 47: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/47.jpg)
Testes: dado III – imagens segmentadas
![Page 48: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/48.jpg)
Recontrução EEEI - dado I – 256x256
![Page 49: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/49.jpg)
Recontrução EEEC - dado I – 256x256
![Page 50: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/50.jpg)
Recontrução EERA - dado I – 256x256
![Page 51: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/51.jpg)
Recontrução EEEI - dado II – 256x256
![Page 52: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/52.jpg)
Recontrução EEEC - dado II – 256x256
![Page 53: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/53.jpg)
Recontrução EERA - dado II – 256x256
![Page 54: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/54.jpg)
Recontrução EEEI - dado III – 256x256
![Page 55: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/55.jpg)
Recontrução EEEC - dado III – 256x256
![Page 56: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/56.jpg)
Recontrução EERA - dado III – 256x256
![Page 57: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/57.jpg)
Reconstruções em diferentes resoluções – dado Tigre
EEEI 64x64
EEEI 128x128
EEEC 64x64
EEEC 128x128
EERA 64x64
EERA 128x128
![Page 58: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/58.jpg)
Reconstruções em diferentes resoluções – dado Dino
EEEI 64x64
EEEI 128x128
EEEC 64x64
EEEC 128x128
EERA 64x64
EERA 128x128
![Page 59: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/59.jpg)
Níveis de refinamento no método EERA
Nível 5Nível 6Nível 7Nível 8
![Page 60: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/60.jpg)
Níveis de refinamento no método EERA
Nível 4Nível 5Nível 6Nível 7Nível 8
![Page 61: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/61.jpg)
Níveis de refinamento no método EERA
Nível 5Nível 6Nível 7Nível 8
![Page 62: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/62.jpg)
Níveis de refinamento no método EERA
Nível 5Nível 6Nível 7Nível 8
![Page 63: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/63.jpg)
Resultados: dado “Al”EEEI
Tamanho Total de voxs. Voxs. removidos Voxs. consistentes Tempo64x64 262144 242683 19461 1s
128x128 2097152 1941614 155538 6s
256x256 16777216 15532893 1244323 49s
EEEC
Tamanho Total de voxs. Voxs. removidos Voxs. consistentes Tempo64x64 262144 244540 17604 3s
128x128 2097152 1948049 149103 12s
256x256 16777216 15530995 1246221 70s
EERA
Tamanho Tempo64x64 4s
128x128 8s
256x256 18s
![Page 64: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/64.jpg)
Resultados: dado “Dolphins”EEEI
Tamanho Total de voxs. Voxs. removidos Voxs. consistentes Tempo64x64 262144 257438 4706 1s
128x128 2097152 2059575 37577 6s
256x256 16777216 15532893 299199 45s
EEEC
Tamanho Total de voxs. Voxs. removidos Voxs. consistentes Tempo64x64 262144 258286 3858 3s
128x128 2097152 2062666 34486 12s
256x256 16777216 16476192 301024 71s
EERA
Tamanho Tempo64x64 3s
128x128 6s
256x256 13s
![Page 65: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/65.jpg)
Resultados: dado “Tigre”EEEI
Tamanho Total de voxs. Voxs. removidos Voxs. consistentes Tempo64x64 262144 260314 1803 1s
128x128 2097152 2033893 63259 2s
256x256 16777216 16010084 767132 12s
EEEC
Tamanho Total de voxs. Voxs. removidos Voxs. consistentes Tempo64x64 262144 252885 9259 4s
128x128 2097152 2009781 80371 9s
256x256 16777216 16058761 718455 31s
EERA
Tamanho Tempo64x64 6s
128x128 11s
256x256 22s
![Page 66: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/66.jpg)
Resultados: dado “Dino”EEEI
Tamanho Total de voxs. Voxs. removidos Voxs. consistentes Tempo64x64 262144 259663 2481 1s
128x128 2097152 2033893 33985 2s
256x256 16777216 16434518 342698 12s
EEEC
Tamanho Total de voxs. Voxs. removidos Voxs. consistentes Tempo64x64 262144 252885 3542 4s
128x128 2097152 2061380 35772 9s
256x256 16777216 16474304 302912 34s
EERA
Tamanho Tempo64x64 5s
128x128 10s
256x256 21s
![Page 67: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/67.jpg)
Conclusões
• Reconstrução no espaço da cena:– Resolve parte dos problemas de amostragem
encontrados no método que trabalha no espaço da imagem.
Permite que a reconstrução seja realizada mesmo quando a taxa de ruído é bastante elevada.
Sem programação em GPU é mais lento que o método no espaço da imagem.
![Page 68: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/68.jpg)
Conclusões
• Uso de informações de segmentação:– É importante para aumentar a precisão geométrica
da reconstrução.É fundamental quando poucas imagens são
utilizadas.É fundamental em estratégia baseadas em
refinamento adaptativo.
![Page 69: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/69.jpg)
Conclusões
• Uso de refinamento adaptativo:– Produz resultados de qualidade similar aos métodos não
adaptativos que trabalham no espaço da cena.– Apresenta-se como uma estratégia eficiente para
reconstrução.– Aproveita coerência espacial da cena.– Tem potencial para aproveitar também a coerência
temporal.Com a classificação proposta ele pode ser
implementado sem critérios de foto-consistência complicados.
![Page 70: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/70.jpg)
Conclusões
Sobre o aparato implementado:– É de fácil construção e de baixo custo.– É simples de se utilizar.– É escalonável.– Produz resultados razoáveis mesmo com
equipamentos de aquisição de baixo custo.– Consegue lidar razoavelmente bem em
condições de pouco controle sobre a iluminação.
![Page 71: Reconstrução de cenas a partir de imagens através de Escultura do Espaço por Refinamento Adaptativo por Anselmo A. Montenegro Tese de doutorado Orientadores:](https://reader035.vdocuments.com.br/reader035/viewer/2022062502/5706384d1a28abb8238f6a4a/html5/thumbnails/71.jpg)
Trabalhos futuros
• Programação em placas gráficas.• Investigação de outras estruturas para
representação do espaço.• Uso de câmeras reposicionáveis.• Reconstrução em tempo real.• Investigação de modelos probabilísticos.• Uso de estimativas da superfície no cálculo da
foto-consistência.