programa internacional de avaliação de estudantes - pisa

Universidade Luterana do Brasil

Programa de Pós Graduação em Ensino de Ciências e Matemática

Currículo: Concepções e Práticas Pedagógicas em Ciências e MatemáticaProf. Dra. Cláudia L. Oliveira Groenwald

Maio/2014

Ednei BecherMarcos Reis

Gerry SanchezRoberta Dall Agnese

Suelen Nobre

Introdução

Programa Internacional de Avaliação de Estudantes:

é uma iniciativa internacional de AVALIAÇÃO COMPARADA;

estudantes na faixa dos 15 anos;

desenvolvido e coordenado pela Organização para Cooperação e Desenvolvimento Econômico (OCDE);

Brasil: Instituto Nacional de Estudos e Pesquisas Educacionais Anísio Teixeira (INEP).

Introdução

Organização das provas:

Os testes do PISA (leitura, matemática e ciências) estão organizados em termos de competências gerais;

O PISA não testa o domínio de algum currículo em específico.

aplicar os conhecimentos e habilidades que aprenderam na escola para os

desafios da vida real

Áreas do conhecimento

Leitura Matemática Ciências

As avaliações do Pisa acontecem a cada três anos e abrangem três áreas do conhecimento:

Histórico - Surgimento Demanda dos países membros OCDE para dados

regulares e confiáveis sobre:

A OCDE começou a trabalhar no PISA, em meados da década de 1990;

Lançado oficialmente em 1997;

1ª. primeira pesquisa em 2000.

CONHECIMENTOS EHABILIDADES DOS ALUNOS

DESEMPENHO DOSSISTEMAS DE ENSINO

2000 2003 2006 2009 2012 201543 41 58 68 65 75

Histórico - Ênfases

Cada edição do programa confere ênfase a uma área específica:

Histórico – Financiamento e Participação

Contribuições diretas das autoridades governamentais – Ministérios da Educação.

Países interessados em participar devem entrar em contato com a secretaria da OCDE;

Conselho Diretor do PISA aprova a adesão de acordo com determinados critérios;

Os participantes devem ter o conhecimento técnico necessário para administrar uma avaliação internacional e deve ser capaz de cumprir a totalidade dos custos de participação;

Para participar de um ciclo do PISA, os participantes devem juntar-se dois anos antes da pesquisa ocorre. Por exemplo, o PISA 2012 participantes juntaram-se antes de Março de 2010.

Histórico - Singularidade

Abrangência e regularidade;

70 países participantes;

Permite acompanhar o desenvolvimento das principais metas de Educação;

Avalia no final do período de escolarização obrigatória.

Histórico – Desempenho Brasileiro

O Brasil avançou na média das três áreas em 9,2% no comparativo com o Pisa 2000, porém estacionou em relação ao Pisa 2009 em Leitura e Ciências, e incrementou 1,3% em

Matemática. Com esse resultado, a meta estabelecida pelo governo brasileiro de se igualar à média dos países ricos (da OCDE) – prevista para 2022 – se estende para 2030.

2000 - 43 países;

- Brasil em último. 20

12 - 65 países;- Brasil:• 57º. M;• 54º. C;• 58º. L.

56% dos estudantes tiveram um

desempenho de “quase analfabetos

funcionais”

México: 44%

atrás do Chile, Uruguai, México, Turquia, Cazaquistão, Costa Rica, Emirados Árabes

Objetivos

Discussão da qualidade da educação ministrada nos países participantes.

O Programa centra-se no conceito de “LITERACIA” que, de acordo com os seus responsáveis, consiste em os alunos aplicarem o conhecimento e as suas capacidades em ÁREAS CHAVE, em analisarem, raciocinarem e comunicarem, eficaz e efetivamente, e em resolverem e interpretarem problemas, numa variedade de situações da VIDA REAL.

Objetivos

Comparações internacionais dos países participantes

O PISA possibilita avaliar a QUALIDADE DAS APRENDIZAGENS, em termos comparativos, pondo em relação os desempenhos dos vários sistemas educativos.

Entre seus objetivos são AVALIAR HABILIDADES de leituras necessárias em situações da vida real.

Privilegiar o TEXTO INFORMATIVO e esquemas cognitivos de leitura.

Objetivos Subsidiar políticas de melhoria da educação

O MEC estabeleceu metas de melhorias no Pisa. Até 2021, o objetivo é atingir 473 PONTOS, média dos países-membros da OCDE atualmente.

O Brasil vem aumentando gradativamente os investimentos no setor:

Passou de 4,7% do Produto Interno Bruto (PIB) em 2000 para 6,1% em 2011.

Pelo Plano Nacional de Educação (PNE), esse percentual deve chegar a 10% em 2020.

Objetivos Relacionar o desempenho dos alunos a variáveis

demográficas, socioeconômicas e educacionais.

O perfil sócio econômico e cultural dos alunos é fator substancialmente determinante na distribuição por entre os níveis de proficiência.

Os resultados do PISA, indicam:Alunos de status Sócio Econômico Muito Baixo Alunos de status Sócio Econômico

Alto38,3% dos alunos encontram-se no NÍVEL 0 e a presença desses alunos nos níveis mais altos da escala é praticamente nula, apenas 0,6% conseguem atingir o NÍVEL 4 da escala.

32,2% dos alunos alocam-se no NÍVEL 2 da escala.

Objetivos:

DEMOGRÁFICAS SOCIOECONÔMICAS EDUCACIONAIS

5. Relacionar o DESEMPENHO dos alunos de acordo com as variáveis:

1. Produzir indicadores do DESEMPENHO ESTUDANTIL, em todos os países envolvidos;

2. Comparar os PAÍSES participantes;3. Discutir sobre a QUALIDADE da EDUCAÇÃO ministrada nos

países participantes; 4. Subsidiar POLÍTICAS de melhoria da Educação.

Competências

O Pisa procura verificar a operacionalização de esquemas cognitivos em termos de:

1º conteúdos ou estruturas do conhecimento que os

alunos precisam adquirir em cada área

2º competências para aplicação desses conhecimentos3º contextos em que conhecimentos e competências

são aplicados.

Competências (Leitura)Para avaliar o letramento em Leitura, os alunos são levados a realizar uma ampla gama de tarefas:

1º Com diferentes tipos de textos, abrangendo desde a recuperação de informações específicas até a demonstração de compreensão geral;

2º Interpretação de texto e reflexão sobre seu conteúdo;

3º Os textos utilizados incluem: passagens em prosa ou verso, listas, formulários, tabelas, gráficos e diagramas.

Competências (Leitura)

Localizar informações

Interpretar textos

Avaliar textos

Refletir sobre textos

Competências (Matemática)

A avaliação do letramento matemático demanda o uso de competências matemáticas em vários níveis:1º Realização de operações básicas;

2º Raciocínio e as descobertas matemáticas;

3º Conhecimento e a aplicação de conteúdos de áreas como: estimativa, mudança e crescimento, espaço e forma, raciocínio quantitativo, incerteza, dependências e relações.

Competências (Matemática)

Raciocínio quantitativo

Relações quantitativas

ReflexãoConexões

Reprodução

Competências (Ciências)

Já o letramento científico envolve o uso de conceitos científicos necessários para: 1º Compreender e ajudar a tomar decisões sobre o mundo

natural;

2º Capacidade de reconhecer e explicar questões científicas;

3º Fazer uso de evidências científicas;

4º Tirar conclusões com base científica e comunicar essas conclusões.

Competências (Ciências)

Saúde

Meio Ambiente

TecnologiaFenômenos naturais

Recursos Naturais

Como é avaliado?Os instrumentos de avaliação PISA 2000:

PISA 2000 foi cuidadosamente desenhado por uma rede internacional de instituições líderes e especialistas. Onde, cada aluno participou, em seu/sua própria escola, em uma sessão de avaliação escrita de duas horas e passou cerca de meia hora respondendo a um questionário sobre si mesmo.

Diretores de escola foram convidados para dar mais informações sobre as características da escola em outro questionário de 30 minutos.

As avaliações do PISA 2000 foi de modo impresso. Os alunos eram obrigados a considerar passagens escritas e diagramas, e para responder a uma série de perguntas pessoais. Grande parte do material foi projetado para determinar se os alunos pudessem refletir e pensar ativamente sobre o domínio.

Como é avaliado?Os instrumentos de avaliação PISA 2000:

Cada aluno foi avaliado por duas horas, mas nem todos os estudantes foram dadas as mesmas tarefas de avaliação. Diferentes combinações de tarefas foram agrupadas em nove livretos de avaliação diferentes.

No total, a avaliação do PISA 2000 foi baseado em 141 tarefas de alfabetização em leitura, 32 tarefas de alfabetização matemática e 35 tarefas de alfabetização científica.

Formato das perguntas do teste• Quarenta e cinco por cento das tarefas necessárias aos alunos para construir suas

próprias respostas;• Outros 45 por cento das tarefas foram feitas em formato de múltipla escolha;• Os restantes 10 por cento das tarefas necessárias aos alunos constroem a resposta

dentre uma gama limitada de respostas aceitáveis.

Alguns exemplos de questõesEXEMPLO:Use as informações sobre o Lago Chade na página ao lado para responder às perguntas abaixo.

Pergunta 1: O Lago Chade (K040Q02) Leitura tarefa: Recuperando informaçõesFormato do Texto: Não-contínuo Situação: Público

Qual é a profundidade do lago Chade hoje? A) Cerca de dois metros. B) Cerca de quinze metros. C) Cerca de cinquenta metros. D) Ele desapareceu completamente. E) A informação não é fornecida. Pontuação - Questão 1 Pontuação 1: Resposta A - cerca de dois metros. Pontuação 0: Outras respostas.

Disponível em: <http://www.keepeek.com/Digital-Asset-Management/oecd/education/sample-tasks-from-the-pisa-2000-assessment_9789264194274-en#page1>. Acessado em 14/03/2014.

Alguns exemplos de questõesPergunta 2: O Lago Chade (R040Q03A)Leitura tarefa: Recuperação de informações O formato de texto: Não-contínuo Situação: Público

Em cerca de que ano é que o gráfico da Figura A começa?Pontuação - Questão 2 Score 1: Respostas que estado 11000 BC (ou uma aproximação entre 10500 e 12000), indicando que o aluno tenha extrapolado a partir da escala). Por exemplo: • 11000. • 11000 AD. • 10500 AD. • Pouco antes de 10.000 AD. • Cerca de 12 mil. • Cerca de 11.000 AD. Pontuação 0: Outras respostas, incluindo a seta apontando para o ponto do gráfico de partida. Por exemplo: • 10000 BC. [Não conseguiu extrapolar a partir da escala.]• 20000 AD. • 8000 AD. [Olhou para a figura errada.]• 11000BC 4000 AD. [Ignorar resposta cruzado.] • 0.

Alguns exemplos de questões

Questão 1: Explorando um texto não contínuo.Composto de pequenos blocos de informação, ele testa a capacidade de estabelecer relações entre as diferentes partes Comentários1. LideNo jargão jornalístico, é a abertura de texto, que apresenta brevemente o assunto da reportagem. Saber isso facilita na hora de identificar a ideia principal.

2. Ilustração

3. Gráfico

4. Legenda

5. Mapa


Vijaypat Singhania utilizou tecnologias encontradas em dois outros meios de transporte. Quais são esses meios de transporte?

1. Avião 2. Nave espacial.

Competência Acessar e recuperar informações Proficiência Nível 4

Análise: A competência envolvida é relativamente simples - o que torna o nível mais difícil é o formato do texto, que exige localizar e organizar diversos pedaços de informação para encontrar o que se pede. No caso, as duas informações estão na legenda. Uma delas (avião) aparece explicitamente, mas a segunda (nave espacial) requer uma pequena inferência para que o aluno identifique que macacão espacial está ligado a espaçonaves.

Pisa 2009: análise de 3 questões de leitura. Nova Escola. Disponível em: <http://revistaescola.abril.com.br/planejamento-e-avaliacao/avaliacao/pisa-2009-analise-3-questoes-leitura-621963.shtml>. Acessado em 14/03/2014.


OECD, Better Policies for Better Lives. Programmer for International Student Assessment (PISA). Disponível em: <http://www.oecd.org/pisa/test/>. Acessado em 14/03/2014.

Tendências para 2015 PISA 2015 marcará um passo significativo neste desenvolvimento, com a

maioria dos países de se mudar para uma plataforma de avaliação totalmente baseado em computador.

Por último, a rápida expansão do acesso à internet vai torná-la relevante para explorar e considerar o papel da internet no PISA.

O TALIS foi estabelecido para fornecer uma perspectiva mais ampla de professores sobre questões relacionadas com a profissão docente. Sinergias entre PISA e TALIS pode melhorar a qualidade dos dados e produzir mais e melhor compreensão das políticas de ambos os estudos.

Resultados e comparativos

Observa-se que os estudantes avaliados em 2012 estavam mais avançados nos anos de estudo do que aqueles avaliados em 2003 – uma tendência que já podia ser observada nas edições de 2006 e 2009, e que indica que o Brasil vem conseguindo melhores resultados na promoção de seus estudantes. (Brasil, 2013, p.13)


• O ciclo de matemática do PISA 2012 deve ser comparado com o ciclo de 2003, que também foi de matemática. • No conjunto dos países selecionados, observa-se que o Brasil foi o que mais avançou em pontos. • Ao contrário da média dos estudantes da OCDE, que vem apenas oscilando ao longo das edições do PISA, o Brasil vem demonstrando avanços nos resultados da avaliação. (Brasil, 2013, p.14)


Além da evolução dos pontos observável no período, outro aspecto é a evolução dos níveis de proficiência em cada uma das áreas.


• Na edição 2012 o estado de Santa Catarina foi o melhor estado brasileiro em Matemática e Ciências enquanto o Rio Grande do Sul foi o melhor em Leitura.

• A análise das diversas redes públicas destaca a rede federal com a melhor média.Todavia, essa rede é muito reduzida, representando apenas 1,2% dos estudantes, uma parcela com nível socioeconômico mais alto do que a população das redes municipais e estaduais. Abaixo temos a tabela com os dados de Matemática. (Brasil, 2013, p.54)


Para observar o Brasil em uma relação internacional, foram selecionados os países latino-americanos vizinhos – Argentina, Chile, Colômbia, México, Peru, e Uruguai; Portugal e Espanha, por sua uma proximidade cultural; Estados Unidos que, tal como o Brasil, é uma federação de dimensões continentais; e dois países que reconhecidamente apresentam bonssistemas educacionais, sendo um europeu – Finlândia – e outro, asiático – Coréia do Sul. No caso brasileiro, passa de 60% a proporção dos estudantes que não atingiram o Nível 2 considerado o nível necessário para que o estudante possa exercer plenamente sua cidadania. (Brasil, 2013, p.20)

Comparativos e resultados

Número da classe por paísO Brasil possui um número razoável de estudantes por turma, e em algunspaíses com melhor desempenho esse número é reduzido. Todavia, esta é uma variável cuja análise merece ponderação. (Brasil, 2013, p.60)

Quando comparado a outros países, o nível de autonomia escolar é baixo no Brasil, mas situa-se próximo ao de outros vizinhos sul-americanos.


Os modelos e os dados dos questionários socio-econômicos-educacionais preenchidos pelos estudantes, os dados dos questionários preenchidos pelos pais e pelos diretores das escolas integrantes da amostra estão disponíveis para download, no formato para os softwares estatísticos SAS ou SPSS.

http://pisa2012.acer.edu.au

Neste mesmo sitio também é possível fazer consultas diretamente a base de dados.

ReferênciasProgramme for Intenational Sdudent Assessment (PISA). Disponível em: http://www.oecd.org/pisa/aboutpisa/pisafaq.htm. Acessado em: 04 de Abril de 2014.BEYOND PISA 2015: A LONGER-TERM STRATEGY OF PISA. Disponível em: <http://www.oecd.org/pisa/pisaproducts/Longer-term-strategy-of-PISA.pdf>. Acessado em 13 de Março de 2014.

BRASIL. Relatório Nacional PISA 2012 – Resultados brasileiros. Fundação Santillana. São Paulo: 2013.

PISA 2000. Disponível em: <http://www.keepeek.com/Digital-Asset-Management/oecd/education/sample-tasks-from-the-pisa-2000-assessment_9789264194274-en#page1>. Acessado em 14/03/2014.

PISA 2009: análise de 3 questões de leitura. Nova Escola. Disponível em: <http://revistaescola.abril.com.br/planejamento-e-avaliacao/avaliacao/pisa-2009-analise-3-questoes-leitura-621963.shtml>. Acessado em 14/03/2014.

programa internacional de avaliação de estudantes - pisa

Education