oficina de apropriação de resultados - paebes.caedufjf.net · •desenvolver uma atividade para...
TRANSCRIPT
Oficina de Apropriação de Resultados
Paebes 2013
Oficina de Apropriação de Resultados de Língua Portuguesa
Paebes 2013
Dinâmica
Conhecendo o outro.
Paebes 2013
Objetivos:
• Interpretar os resultados da avaliação doPrograma de Avaliação da Educação Básica doEspírito Santo (PAEBES).
• Discutir e elaborar estratégias de intervençãona escola.
Paebes 2013
Avaliação• O que é avaliação?
– O processo de avaliação está relacionado à produção de informações sobre determinada realidade e é algo que está bastante presente no cotidiano escolar: tradicionalmente, os professores aferem o aprendizado dos seus estudantes através de diversos instrumentos (observações, registros, provas etc.) e indicam, a partir daí, o que precisa ser feito para que eles tenham condições de avançar no sistema escolar.
Paebes 2013
Avaliação
• O que é avaliação em larga escala?
– São, em geral, organizadas a partir de um sistema de avaliação cognitiva dos estudantes e são aplicadas de forma padronizada para um grande número de pessoas, entre os quais estão estudantes, professores, diretores, coordenadores.
Paebes 2013
Avaliação
• Por que avaliamos?
– As informações produzidas pelas avaliações em larga escala permitem a implementação de ações mais condizentes com a oferta de uma educação de qualidade e promoção da equidade de oportunidades educacionais.
Paebes 2013
Avaliação
• O que é avaliado?– As avaliações em larga escala usam, como instrumentos,
testes de proficiência e questionários, que permitemavaliar o desempenho escolar e os fatores intra e extraescolares associados a esse desempenho. Os testes deproficiência são elaborados a partir das Matrizes deReferência. Nas avaliações em larga escala, são elas queindicam o que é avaliado para cada área do conhecimentoe etapa de escolaridade, informando as competências ehabilidades esperadas, em diversos níveis decomplexidade.
Paebes 2013
Avaliação
• Importância da avaliação– Como as informações produzidas a partir de um sistema de
avaliação têm papel importante sobre os rumos do sistemade ensino, além do cuidado na garantia da fidedignidadedas informações oferecidas, é fundamental garantir areflexão sobre esses resultados e constante melhoria nasua produção, seja pelo envolvimento crescente dos atoresparticipantes do processo, seja pelo aprimoramento demétodos, instrumentos e logística de realização daavaliação.
Paebes 2013
Programa de Avaliação da Educação Básica do Espírito Santo
• Edições:
– 2008, 2009, 2010, 2011, 2012, 2013
• Etapas avaliadas:
– 5º EF, 9º EF, 3º EM
• Disciplinas avaliadas em 2013
– Língua Portuguesa
– Matemática
– Ciências da Natureza
Paebes 2013
Programa de Avaliação da Educação Básica do Espírito Santo ALFA
• Etapas avaliadas:
– 1º EF, 2ºEF, 3º EF
• Disciplinas avaliadas
– Língua Portuguesa (leitura e escrita)
– Matemática
Paebes 2013
Matriz de Referência
Elemento base de origem dos testes utilizados noPaebes.
Garante legitimidade e transparência à avaliação.
A Matriz não esgota o conteúdo a ser trabalhadoem sala de aula e, portanto, não pode ser confundidacom propostas curriculares, estratégias de ensino oudiretrizes pedagógicas.
Paebes 2013
Matriz de Referência É formada por um conjunto de tópicos ou temas que
representam uma subdivisão de acordo com conteúdo,competências de área e habilidades.
Cada tema apresenta um conjunto de habilidades.
Cada habilidade é descrita por um descritor.
Os descritores apresentam as habilidades consideradasbásicas e possíveis de serem aferidas por meio doinstrumento utilizado em avaliações em larga escala.
Paebes 2013
O que compreendemos por Competências e Habilidades?
Exemplo:
Para realizar procedimentos básicos de leitura, por
exemplo, o estudante precisa acionar diversas
habilidades leitoras tais como localizar, identificar, inferir e
distinguir elementos textuais presentes na superfície textualou sugeridas pelo texto.
O conjunto dessas habilidades em tópicos/eixostemáticos constituem uma competência.
Paebes 2013
Matriz de Referência
Paebes 2013
Referenciais Curriculares e Matriz de Referência
Referenciais Curriculares e Matriz de Referência
Paebes 2013
Referenciais Curriculares e Matriz de ReferênciaPaebes 2013
Matriz de Referência de Avaliação de Língua Portuguesa
I. Procedimentos de Leitura.
II. Implicações do suporte, do gênero e/ou doenunciador na compreensão de textos.
III. Relações entre Textos.
IV. Coerência e Coesão no processamento de textos.
V. Relações entre recursos expressivos.
VI. Variação Linguística.
Paebes 2013
Atividade – Matriz de Referência
Primeira parte:• Formação de grupos com 4 pessoas.
• Atividade de cada grupo:
– descrever e distinguir os conteúdos trabalhados em cada um dos tópicos da disciplina (o grupo poderá relacionar conteúdos de modo geral, para todas as etapas de escolaridade, ou limitar apenas uma etapa avaliada pelo programa).
• Discutir com os participantes da turma, os conteúdos apontados.
Paebes 2013
Atividade – Matriz de Referência
Segunda parte:• Cada grupo ficará responsável por um tópico da disciplina.
• dividir os tópicos entre os grupos, sendo que pelo número de grupos, possivelmente, os tópicos serão repetidos).
• Atividade de cada grupo:
• discutir os conteúdos do tópico selecionado;
• desenvolver uma atividade para sala de aula, com base em um ou mais conteúdos apresentados.
• Entregar a Matriz de Referência.
Paebes 2013
Atividade – Matriz de Referência
• Atividade de cada grupo:
• Associar os conteúdos das atividades com os descritores da matriz.• Quais os conteúdos abordados na atividade?
• Quais deles estão presentes na matriz?
• Quais desses conteúdos não estão presentes na matriz? Apresente possíveis motivos para esses conteúdos não serem
avaliados pelo programa.
• Cada grupo apresentará sua atividade, apontando os conteúdos trabalhados e associando-os ao currículo e aos descritores da matriz.
Paebes 2013
Matriz de Referência
• Apresenta habilidades que estão no currículo.
• Podem apresentar descrições de habilidadesdiferentes do que está apresentado nocurrículo, mas relacionadas ao mesmoconteúdo.
• Apresenta habilidades possíveis de aferir emum teste de múltipla escolha.
Paebes 2013
Atividades e Itens
Paebes 2013
• Atividades podem apresentar odesenvolvimento de diversas habilidades.
• O item avalia apenas uma habilidade.
• Atividades são desenvolvidas com base emdiversos instrumentos e recursos didáticos.
• O item é, geralmente, desenvolvido por meiode questões de múltipla escolha.
Das matrizes aos itens dos Testes de
Proficiência
Paebes 2013
VAMOS RESOLVER ALGUNS ITENS?
Paebes 2013
Atividades e Itens 5º ano
Paebes 2013
Gabarito:
Paebes 2013
Atividades e Itens 5º ano
Paebes 2013
Gabarito:
Paebes 2013
Gabarito:
Paebes 2013
Gabarito:
Paebes 2013
Gabarito:
Paebes 2013
Atividades e Itens 5º ano
Paebes 2013
Gabarito:
Paebes 2013
Atividades e Itens - 9º ano
Paebes 2013
Gabarito:Paebes 2013
Atividades e Itens - 9º ano Paebes 2013
Gabarito:Paebes 2013
Gabarito:Paebes 2013
Gabarito:Paebes 2013
Gabarito:Paebes 2013
Atividades e Itens - 9º ano Paebes 2013
Gabarito:
Paebes 2013
Atividades e Itens – 3º ano EM
Paebes 2013
Gabarito:
Paebes 2013
Atividades e Itens – 3º ano EM
Paebes 2013
Gabarito:
Paebes 2013
Atividades e Itens – 3º ano EM
Paebes 2013
Gabarito:
Paebes 2013
RESULTADOS
Paebes 2013
Gestores Professores Estudantes
Paebes 2013
Gestores
REDE
ESCOLA
Planejamento e execução de
políticas públicas.
Criação de metas de qualidade
e equidade educacionais.
Implementação de medidas de
responsabilização.
Políticas de incentivos diretos ou
indiretos.
Ações de formação continuada
de professores .
Elaboração do projeto da
escola.
Monitoramento da qualidade de
ensino .
Subsídio para avaliação
institucional.
Professores
Intervenção pedagógica.
Elaboração de projetos especiais.
Foco nos estudantes com dificuldades.
Ações de recuperação escolar.
Planejamento das ações de sala de
aula.
Visão proativa quanto ao
desenvolvimento de habilidades e
competências ao longo da educação
básica.
Estudantes
Acompanhamento individual do
desempenho escolar pelos
estudantes e seus familiares.
Informações sobre a qualidade dos
serviços educacionais oferecidos .
ResultadosPaebes 2013
1) Observe a participação dos estudantes na escola.
Qual é o percentual de participação dos estudantes na avaliação aplicada nesta escola?
1. Acima de 80%.2. Abaixo de 80%.
• Comparar os resultados de 2011, 2012 e 2013 alcançados pela escola (mesma etapa de escolaridade), fazendo apontamentos ao observar a proficiência média dos estudantes nessas avaliações.
• Vamos alocar os resultados de proficiência alcançados pela escola nas avaliações de 2011, 2012 e 2013 (traçar na escala de proficiência). Isso facilita a interpretação dos dados, que faremos a seguir.
Paebes 2013
• A proficiência tem oscilado em cada avaliação realizada?
• 2.1) Sim. Os resultados são diferentes de um ano para o outro.
• Como a proficiência tem oscilado nas avaliações de 2011, 2012 e 2013?
• 2.2)Não, os resultados não têm oscilado.
Paebes 2013
• De acordo com a escala de proficiência e osresultados alcançados pela escola (ouregional), quais são as habilidadesdesenvolvidas pelo grupo de estudantes?
• Na reflexão feita anteriormente, observamosse a proficiência tem oscilado e, nestemomento, observaremos quais as habilidadesforam/são desenvolvidas pelos estudantes(em relação à média).
Paebes 2013
• Quando analisamos o resultado geral daturma, podemos pensar, também, nospadrões de desempenho, ou seja, nadescrição das habilidades desenvolvidas pelosestudantes em relação a 4 diferentes graus dedesempenho alcançado na avaliação.
• Qual o padrão de desempenho caracteriza odesenvolvimento dos estudantes de suaescola?
Paebes 2013
2.6) em 2011
• Em relação à proficiência média alcançada pelosestudantes de sua escola, qual o padrão dedesempenho caracteriza o desenvolvimento deles?
2.7) em 2012
• Em relação à proficiência média alcançada pelosestudantes de sua escola, qual o padrão dedesempenho caracteriza o desenvolvimento deles?
Paebes 2013
2.8) em 2013
• Em relação à proficiência média alcançada pelos estudantesde sua escola, qual o padrão de desempenho caracteriza odesenvolvimento deles?
• Os estudantes mudaram de Padrão de Desempenho emrelação à avaliação de 2012 e 2013?
Paebes 2013
• Observe o Padrão mais avançado e as habilidades esperadasno desenvolvimento dos estudantes. Os estudantesalcançaram este padrão de desempenho?
2.9) Sim
• Vamos para a próxima etapa.
2.10) Não
• Reflexão: Quais são as habilidades desenvolvidas pelosestudantes na sua escola e quais são as habilidades que elesainda não desenvolveram nesta etapa?
Sabemos, entretanto, que a análise em relação à proficiêncianão pode ser observada apenas com a proficiência média ,mas com as diversas proficiências alcançadas por cadaestudante da escola. Com isso, vamos observar a distribuiçãodos estudantes em relação ao Padrão de Desempenho.
Paebes 2013
• Observe como os estudantes estão distribuídos em cada padrão dedesempenho e aponte qual o percentual de estudantes em cada um. Oque podemos analisar?
2.11) O número de estudantes em cada Padrão de Desempenho.
2.12) A distribuição dos estudantes em cada Padrão de Desempenho
• Como os estudantes estão distribuídos entre os padrões de desempenho?
2.12.1) 2011, 2012, 2013
• Qual o percentual de estudantes em cada padrão de desempenho?
2.12.2)2013
• O percentual de estudantes por padrão de desempenho muda nasavaliações realizadas em 2011, 2012 e 2013?
2.12.2.1) Sim. O percentual de estudantes em padrões de desempenho maisavançados têm aumentado a cada avaliação aplicada.
Paebes 2013
• Neste caso, a proficiência média também tem diminuído?
2.12.3.1.1) Sim
2.12.3.1.1) Não
Paebes 2013
• Após discutir a participação e o desenvolvimento dos
estudantes em uma mesma etapa de escolaridade ao longodas avaliações aplicadas no projeto, propomos uma análiseem relação ao desenvolvimento dos estudantes em diferentesetapas.
• Isso permitirá conhecer como os estudantes da escoladesenvolvem habilidades no ensino fundamental e médio. Oque os estudantes têm avançado de uma etapa para outra?Esse resultado é significativo?
Paebes 2013
3) Comparar os resultados das diferentes etapas de escolaridade de um mesmo grupo (escola/regional).
• Vamos analisar os resultados de 2013 nas etapas de escolaridade avaliadas pelo projeto (neste caso, 5ºEF, 9ºEF, 1º EM, 2ºEM e 3º EM).
• A proficiência dos estudantes desta escola (ou regional) tem aumentado a cada etapa de escolaridade avaliada?
3.1) Sim
3.2) Não
Paebes 2013
• Os estudantes têm desenvolvido habilidades mais complexasde uma etapa de escolaridade avaliada para outra maisavançada? (para isso, consulte a proficiência média e adescrição dos padrões de desempenho).
3.3) Sim
3.4) Não
Paebes 2013
• Como percebemos o desenvolvimento dosestudantes em cada etapa de escolaridade avaliada,ao observar a distribuição por padrão dedesempenho. A cada etapa de escolaridade avaliada,o percentual de estudantes em padrão dedesempenho mais baixos têm aumentado?
3.5) Sim
3.6) Não, os percentuais são os mesmos.
3.7) Não, a situação é a contrária da apresentada.
Paebes 2013
Dúvidas?• Inserir as questões do documento “Questões
norteadoras para a análise dos resultados reais”...
Paebes 2013
Paebes 2013