Avaliação: O fim do vôo cego das escolas

Claudio de Moura Castro

Não há navegação sem saber ‘oncotava’ e ‘oncotô’

• Varig não sabia onde estava, caiu na floresta Amazônica

• Se tivesse um GPS não se perderia• Cadê o GPS da escola?• Para saber ‘oncovô’, é preciso saber ‘oncotava’

e ‘oncotô’• Cadê o termômetro da escola?• Hoje existem: SIMAVE, Alfa (MG), Prova Brasil,

IDEB, ENEM• Falta saber usar (Dá o GPS mas não ensina a

ligar?). Mas é muito fácil!

Como se mede e o que se mede?

• GPS usa o tempo para chegar sinal de cada satélite

• Dada a combinação dos tempos medidos, calcula as coordenadas do local onde está

GPS

E na educação?

• Na educação, o mecanismo são os testes e o resultado é o nível de aprendizado dos alunos

• Não é preciso entender de satélites para usar um GPS. Não é preciso entender muito de testes para avaliar os resultados

• É só saber o que significam os números• A nota é como em uma prova comum: a

contagem das respostas certas

É possível medir o que os alunos aprenderam?

• Mede-se precariamente formação moral, cidadania e criatividade

• Mas é fácil medir o resultado mais fundamental da escola: os alunos conseguem entender um texto escrito?

Questão do PISA

• “Você sabia que em 1996 gastamos com chocolate o mesmo que nosso governo gastou para ajudar os países pobres? Será que há alguma coisa errada com nossas prioridades? O que você pretende fazer diante disso? É com você mesmo!”

• Qual o objetivo desta carta? Provocar:– Culpa– Divertimento– Medo– Satisfação

Quais os testes hoje existentes?

• SAEB• Prova Brasil e SIMAVE• IDEB• Provinha Brasil e Alfa (MG)• ENEM

SAEB• Mede conhecimentos escolares e

raciocínio (4ª, 8ª e 3ª médio)• Aplicado a amostras de cada estado,

público e privado, rural e urbano• Muito confiável, mas não permite

particularizar cidades, escolas ou alunos• Mostra relativa estabilidade nos últimos

dez anos• Mostra resultados muito ruins: mais da

metade dos alunos não sabe ler corretamente na 4ª série

Prova Brasil e SIMAVE

• Mede mais ou menos o mesmo que o SAEB: raciocínio e conhecimentos escolares

• Aplicada aos alunos de todas as escolas (com mais de 30 alunos)

• 3,3 milhões de alunos de 4ª e 8ª em 41 mil escolas

• Língua Portuguesa e Matemática• Repetida a cada 2 anos, permite comparar

escolas e medir progresso

IDEB• Com o mesmo rendimento, quem reprova os

alunos mais fracos tem resultados piores 200 pontos + 20% reprovação< 200 pontos + 10% reprovação

• Com a mesma reprovação, quem ganha menos pontos tem resultados piores

10% reprovação + 200 pontos< 10% reprovação + 250 pontos

• IDEB combina aprendizado + velocidade de avanço entre as séries: capta a excelência global da escola

Provinha Brasil e Alfabetização em Tempo Certo

• Domínio da leitura entre 6 e 8 anos• Notas para todas as escolas e todos os

alunos• Todo pai de aluno pode conhecer o nível

de aprendizado do seu filho• Prioridade de Minas Gerais é alfabetizar

todos os alunos na idade certa• Prova é o GPS da Secretaria Estadual

ENEM

• Última série do médio: Português e Matemática• Mede raciocínio em situações-problema, mais

que currículo e memória • Voluntário, 3,5 milhões de inscritos• Resultado individual na Internet• Usado por algumas faculdades e pelo PROUNI

para acesso• Comparações problemáticas, por ser voluntário

(em duas escolas iguais, se em uma 10% faz a prova e em outra 50%, resultados diferentes)

Como se interpretam os resultados?

• Números absolutos não dizem nada, a não ser para especialistas

• Não há quilo ou metro de conhecimento• O que interessam são as comparações

com outras escolas

Como Ouro Branco interpreta seus resultados

• Na Internet:http://provabrasil.inep.gov.br/ http://www.enem.inep.gov.br/