captura de expressões faciais para identificação da emoção de alegria em humanos são leopoldo,...

Captura de expressões faciais para identificação da emoção de alegria em

humanos

São Leopoldo, dezembro de 2007

Eduardo de OliveiraEduardo de Oliveira

Patrícia A. Jaques (orientadora)Patrícia A. Jaques (orientadora)

UNISINOSUNISINOS

Plano da apresentaçãoPlano da apresentação

Introdução Referencial teórico Objetivos Metodologia Métodos Etapas do trabalho proposto Conclusões

2

IntroduçãoIntrodução

Motivação Evolução computacional; Melhor interface; Estados afetivos.

3



4

Referencial TeóricoReferencial Teórico

Visão Computacional Detecção de Faces; Detecção de Características.

Computação Afetiva x Psicologia Emoções x Estados Afetivos; Classificação de expressões

faciais; Inferência da emoção. 5



6

ObjetivosObjetivos

Objetivo principal Detectar da face do usuário a

manifestação da emoção alegria: através de uma webcam se baseando nas imagens estáticas

7

ObjetivosObjetivos

Objetivos específicos Aprofundar e agregar

conhecimento dos referenciais teóricos;

Encontrar métodos para detecção de face, características faciais, classificação de expressões faciais e inferência de emoções;

Implementar e avaliar aplicativo que execute os objetivos;

Propor evoluções.

8



9

MetodologiaMetodologia

10


11

Webcam

Detecção da faceDetecção da face


12

Webcam



13

Webcam


Detecção de características faciais



14

Webcam





15

Webcam




Classificação da Expressão facialClassificação da Expressão facial


16

Webcam

AU 12+6 (Sorriso)






17

Webcam

AU 12+6 (Sorriso)





Inferência da EmoçãoInferência da Emoção


18

Webcam

AU 12+6 (Sorriso)





Inferência da EmoçãoInferência da Emoção Alegria


19

Webcam

AU 12+6 (Sorriso)






Visão Computacional


20

Webcam

AU 12+6 (Sorriso)







Computação Afetiva


21

Webcam

AU 12+6 (Sorriso)







Computação Afetiva

Interação Humano-Computador



22

MétodosMétodos


Detecção de características

faciais

Detecção de características

faciais


Inferência da Emoção

Inferência da Emoção

- Métodos baseados em aparência- Haar-like features (OpenCV)

- Métodos baseados em aparência- Haar-like features (OpenCV)

- Métodos de aprendizado de máquina- Métodos heurísticos

- Interpretação- Mapeamento

23



24

Etapas do trabalho Etapas do trabalho propostoproposto

1. Revisão bibliográfica Interação Humano-Computador; Visão Computacional; Computação Afetiva.

2. Detecção de face e suas características Detecção de face; Detecção de características.

25


3. Classificação das expressões faciais e inferência da emoção Sistemas de codificação.

4. Desenvolvimento da aplicação Planejamento e implementação.

5. Testes da aplicação Teste sobre bases de faces.

26


6. Finalização Ajustes na aplicação; Avaliações sobre o trabalho; Sugestões futuras.

27



28

ConclusõesConclusões

Realizações Revisão bibliográfica; OpenCV; Bancos de faces e expressões.

Dificuldades encontradas Revisão bibliográfica; Detecção de características; Bancos de faces.

29

ConclusõesConclusões

Desafios Classificação de expressões

faciais; Inferência da emoção; Implementação de aplicativo.

30

Captura de expressões faciais para identificação da emoção de

alegria em humanos

Eduardo de Oliveira Eduardo de Oliveira

Patrícia A. Jaques (orientadora)Patrícia A. Jaques (orientadora)

UNISINOSUNISINOS

CronogramaCronograma

dddd

32

captura de expressões faciais para identificação da emoção de alegria em humanos são leopoldo,...

Documents