APROVA BRASIL

Amaury Patrick Gremaud

Goiânia, 27.04.2010

Pressuposto

Direito à educação = direito a aprender

Se não há aprendizado, não há atendimento aos direitos educacionais dos alunos

Sujeitos Este direito é um direito de todos e

de cada umde cada um de nós Para se verificar se este direito está

sendo atendido – necessário conhecer quem são os sujeitos deste direito

Os censos demográfico e escolar deveriam identificar TODOS e CADA UM dos brasileiros: sujeitos do direito à educação.

Como verificar? Há vagas para todos ?

Censos Há recursos suficientes ?

Dados de orçamento. Há funcionamento regular ?

Dados Escolares: faltas, alocação alunos, material didático, clima escolar.

Há aprendizado ? Prova Brasil

Aprender o que?

Leitura e Matemática competências fundamentais para o

desenvolvimento de todas as outras Mas:

objetivos da escola vão além disto ... Ética, convívio dos diferenças, autonomia

Necessário reconhecer os limites da análise, o que não quer dizer que se deva descartá-la

Padrão Único O sistema educacional brasileiro é analisado

usando testes padronizados e uma métrica comum a todos os alunos.

Art. 210. da Constituição: Serão fixados conteúdos mínimos para o ensino

fundamental, de maneira a assegurar formação básica comum e respeito aos valores culturais e artísticos, nacionais e regionais.

É sobre esse núcleo comum que a Prova Brasil é organizada.

Expectativas e diferenças Expectativas de aprendizagem (dentro deste

núcleo comum - mínimo) são as mesmas para todos

mesmo que existam dificuldades diferentes para cada um dos alunos e estas conduzam a formas diferentes de organização do ensino

Prova Brasil – exames padronizados Padronização tem um sentido importante que reflete

a expressão da cidadania comum a todos

SAEB - MATRIZ DE REFERÊNCIA

Os conteúdos são subdivididos descritores que estão

associados às habilidades a serem desenvolvidas em

cada série e disciplina.

Cada descritor dá origem a diferentes itens;

A matriz é o documento que orienta a elaboração dos itens (questões) que compõe os testes do

SAEB e da Prova Brasil

MATRIZ DE REFERÊNCIA

MATRIZ DE REFERÊNCIA

BIB - MONTAGEM DOS TESTES PROVA BRASIL

11 itens (4ª série) = 77 itens

13 itens (8ª série) = 91 itens

Caderno de Teste

Prova Brasil

== 21 testes diferentes

123…11

123…11

123…10

123…11

123…11

123…11

123…11

7 blocosTodos os alunos fazem as 2

provas LP e M123…11

123…11 4ª série – 22 itens de Port e 22 de Mat.

8ª série – 26 itens de Port e 26 de Mat

RESULTADOS – ESCALA DE PROFICIÊNCIA

A Escala: ferramenta utilizada para sistematizar informações.

Cada escala é comum às séries avaliadas e cumulativas.

RESULTADOS – ESCALA DE PROFICIÊNCIA

LÍNGUA PORTUGUESA - LEITURA

400375

350325

300275

250225

200175

150<125 125

Habilidadesnão medidas

3ª série EM

8ª série

4ª série

8ª série3ª séri3

EM

Nível Descrição dos Níveis da Escala

125

A partir de textos curtos, como contos infantis, histórias em quadrinhos e convites, os alunos da 4a e da 8a séries:localizam informações explícitas que completam literalmente o enunciado da questão;inferem informações implícitas;reconhecem elementos como o personagem principal;interpretam o texto com auxílio de elementos não verbais;‑identificam a finalidade do texto;estabelecem relação de causa e conseqüência, em textos verbais e não­ verbais; econhecem expressões próprias da linguagem coloquial.

150

Além das habilidades anteriormente citadas, neste nível, os alunos da 4a e da 8a séries:localizam informações explícitas em textos narrativos mais longos, em textos poéticos, informativos e em anúncio de classificados;localizam informações explícitas em situações mais complexas, por exemplo, requerendo a seleção e a comparação de dados do texto;inferem o sentido de palavra em texto poético (cantiga popular);inferem informações, identificando o comportamento e os traços de personalidade de uma determinada personagem a partir de texto do gênero conto de média extensão, de texto não verbal ou expositivo curto;‑identificam o tema de um texto expositivo longo e de um texto informativo simples;identificam o conflito gerador de um conto de média extensão;identificam marcas lingüísticas que evidenciam os elementos que compõem uma narrativa (conto de longa extensão); einterpretam textos com material gráfico diverso e com auxílio de elementos não­ verbais em histórias em quadrinhos, tirinhas e poemas, identificando características e ações dos personagens.

PROVA BRASIL – Escala de Língua Portuguesa

OS NÍVEIS DAS ESCALAS

Possuem complexidades crescentes dadas:

pelo “conteúdo” do conhecimento avaliado

pela operação mental requerida

por fatores como a construção do enunciado ou a tipologia textual.

ALGUMAS CONSIDERAÇÕES

Cada nível acumula as habilidades nele descritas e as constantes nos níveis anteriores; conseqüentemente, o final das escalas são compostos pelas mais altas habilidades avaliadas.

Pela localização numérica do desempenho na escala, é possível saber quais habilidades os alunos já construíram, quais estão desenvolvendo e aquelas a serem alcançadas

Pela complexidade das habilidades já construídas pelos alunos, é possível pressupor que tenham desenvolvido habilidades mais simples, ainda que não tenham sido apresentadas a eles nas provas

QUESTIONAMENTOS

1 – Espera-se que os alunos da 4ª série atinjam os níveis finais das escalas?

2 – Quais são os níveis de desempenho que meus alunos devem atingir em cada série e disciplina?

Apresentação dos Resultados

Como sintetizar os resultados de forma útil ?

Interpretação Normativa e Pedagógica. Os níveis de aprendizado como

proposta de solução.

Níveis de Desempenho

Abaixo do Básico (Insuficiente) Básico Adequado (Proficiente) Avançado

Pontos de Corte

Níveis Abaixo

do Básico

Básico Adequado Avançado

4ª Série- Leitura

< 150 Entre 150 e 200

Entre 200 e 250

Acima de 250

Resultados

Município Hipotético

Níveis de Aprendizado

Quarta OitavaMETA

Leitura Matemática Leitura Matemática

Insuficiente 38,1 48,3 39,4 53,8 5,0

Básico 44,1 39,0 51,3 41,4 25,0

Proficiente 16,0 11,6 8,1 3,7 45,0

Avançado 1,8 1,1 1,2 1,1 25,0

Importância dos Níveis

ESCOLA PROFICIÊNCIA MÉDIA

NÍVEL (%)

INSUFICIENTE BÁSICO PROFICIENTE AVANÇADO

1 199.90 9.1 45.5 45.5 0.0

2 199.28 18.8 30.4 39.1 11.6

3 199.26 16.7 32.3 35.4 15.6

4 200.04 4.3 48.6 37.1 10.0

5 200.39 2.9 44.1 47.1 5.9

6 200.64 13.3 30.0 38.9 17.8

7 199.62 9.4 34.4 40.6 15.6

Interpretação Pedagógica– Abaixo do Básico

Compreender as relações de causa e conseqüência entre idéias em uma tirinha.

Compreender, em uma tirinha o sentido de uma palavra.

Recuperar informações explícitas, com auxílio de imagens, em cartazes.

Localizar informação implícita no texto em um bilhete eletrônico.

Interpretação Pedagógica – Básico

Selecionar legenda apropriada para uma foto de revista.

Localizar informação explícita em um texto narrativo simples.

Identificar o tema ou assunto principal do texto. Recuperar a informação explícita do texto. Identificar personagem de uma narrativa literária

simples. Identificar o efeito de sentido produzido em um

texto pelo uso intencional de recursos expressivos gráfico-visuais.

Interpretação Pedagógica – Adequado

Recuperar informação do texto, localizando o locutor e o interlocutor por marcas lingüísticas.

Localizar e organizar, na seqüência em que aparecem, itens de informação explícita, distribuídos ao longo de um texto.

Interpretar o efeito de sentido que provoca o humor.

Estabelecer relações lógico-semânticas entre partes do texto que dão coesão às idéias.

Interpretação Pedagógica – Avançado

Inferir o assunto principal de um texto, com base em informações contidas em título, subtítulo ou corpo do texto.

Identificar os possíveis elementos constitutivos da organização interna de um bilhete pessoal.

Identificar marcas de variação lingüística de natureza social ou geográfica, no léxico de um texto literário narrativo.

Identificar o efeito de sentido produzido em um texto literário pelo uso intencional de pontuação expressiva (interrogação, exclamação, reticências etc.).

Indicadores Gerenciais

IDEB

Outras Alternativas

O IDEB

Indicador sintético que combina informações de:

desempenho ­ N (proficiência média dos alunos na Prova

Brasil / SAEB)

rendimento escolar ­ P (taxa média de aprovação na etapa

de ensino) ­ inverso do tempo para fazer série

jjj PNIDEB =

jjj TNIDEB /=

Gráfico ilustrativo da projeção do IDEB

0

1

2

3

4

5

6

7

8

9

10

1 3 5 7 9 11 13 15 17 19 21 23 25 27 29 31 33 35 37 39 41 43 45 47 49

IDEB2005

IDEB2021

Tempo

Esforço necessário

Exemplo das projeçoes do IDEB e do sitema de metas Brasil, Paraná e Bahia - 4ª série (5º ano) Ensino Fundamental (2005 - 2021 - 2050)

6,0

3,8

5,0

2,7

6,8

4,8

2

3

4

5

6

7

8

9

2005

2007

2009

2011

2013

2015

2017

2019

2021

2023

2025

2027

2029

2031

2033

2035

2037

2039

2041

2043

2045

2047

2049

IDE

B

Brasil

Bahia

Paraná

Redução da desigualdade

Indicador Gerencial

Níveis Escore

Excluídos – (Ex) 0

Insuficiente – (In) 2

Básico – (Ba) 6

Adequado – (Ad) 8

Avançado – (Av) 10

Indicador Gerencial de Desempenho

Excluídos (0)

Insuficiente(2)

Básico(6)

Adequado(8)

Avançado (10) IRE

Meta 5% 5% 20% 45% 25% 7,5

Pior 100% 0 0 0 0 0

Melhor 0 0 0 0 100% 10

Nível Socioeconômico

Síntese de Indicadores de Renda, Educação, Ocupação.

O questionário contextual da Prova Brasil 2007 permite seu cálculo.

Prova Brasil Leitura – Quarta Série

agrupamento AB BA AD AV Média NSE

1 19,40% 46,90% 28,30% 5,40% 184,5 2

2 22,40% 46,50% 26,70% 4,50% 180,8 3

3 26,10% 41,30% 26,40% 6,20% 180,1 3

4 26,50% 41,90% 25,30% 6,30% 179,7 1

5 23,10% 46,90% 25,80% 4,20% 179,5 3

6 24,60% 47,10% 24,20% 4,00% 177,9 1,5

Uso dos resultados

Compreensão dos resultados: estudo detalhado das planilhas de resultados nas avaliações. Identificar o que fazer, pedagogicamente, para tirar os alunos dos níveis mais baixos e colocá-los nos níveis de desempenho mais altos.

Buscar causas objetivas e não genéricas para os problemas.

Uso dos resultados Identidade da escola: quem atende, onde

está situada, alguma história, as profissões dos pais dos alunos.

Registro dos investimentos realizados na escola: Infra-estrutura, rotinas administrativas etc. Explicitar o que é ainda necessário.

Estabelecimento de metas e mudanças necessárias para os anos futuros.

Explicações Analises de fatores associados:

Efeito escola x Família (sócio-econômico) – existe importante espaço para trabalhos dos gestores

Recursos Organização/gestão Clima acadêmico/ênfase pedagógica Salário/formação

Pesquisas qualitativas

Estruturas Escolares

Pessoas

Projeto Pedagógico

Professores e Funcionários

AlunosAprendizado dos Alunos

CULTURA DA ESCOLA

Pais eSociedade

Processos: Ensino

AdministrativosRotina escolar

Recursos eParcerias

Liderança

GESTÃO DA ESCOLA

100 120 140 160 180 200 220 240 260 280

LP

MAT

8a série SP

8a série BR

4a série ­ simulado

4a série

Simulação do Efeito Escola para Todas as Escolas – Estado de São Paulo

Explicações Analises de fatores associados:

Efeito escola x Família (sócio-econômico) – existe importante espaço para trabalhos dos gestores

Recursos Organização/gestão Clima acadêmico/ênfase pedagógica Salário/formação

Pesquisas qualitativas

Visão compartilhada sobre as metas da escola

Aprendizagem como foco central da escola

Ênfase no desempenho

Aprendizagem voltada para a

trajetória

Ênfase no equilíbrio entre desempenho e participação social

Aprendizagem situada na vida

social

Preocupação com a apropriação de conteúdos,

competências e habilidades

Senso elevado de responsabilidade

profissional

Normas de convivência

claras, aceitas e incorporadas

Otimização do tempo escolar

Expectativaspositivas

Ambiente produtivo Autonomia e proatividade da equipe escolar

eficácia escolar

Relações interpessoais positivas