oficina de apropriaÇÃo de resultados 2011 · o objetivo de oferecer à sociedade uma medida do...
TRANSCRIPT
OFICINA DE APROPRIAÇÃO
DE RESULTADOS 2011
Objetivo
• Analisar e interpretar os resultados do SAEPIpara (re)planejamento das ações pedagógicasimplementadas em sala de aula, a seremdefinidas pelas escolas envolvidas no processode avaliação.
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
AVALIAR
É refletir sobre uma determinada realidade, a partir de dados e informações, e emitir um julgamento que
possibilite uma ação.
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
•Avaliação Interna
• Processo de Aprendizagem
• Diversos Instrumentos de Avaliação
• Avaliação Formativa
• Teoria Clássica dos Testes (Nota)
•Avaliação Externa
• Produto (habilidades)
• Teste de Múltipla Escolha
• Teoria de Resposta ao Item (TRI)
Tipos de Avaliação
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
•Avaliação Interna
• Processo de Aprendizagem
• Diversos Instrumentos de Avaliação
• Avaliação Formativa
• Teoria Clássica dos Testes (Nota)
•Avaliação Externa
• Produto (habilidades)
• Teste de Múltipla Escolha
• Teoria de Resposta ao Item (TRI)
Tipos de Avaliação
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
•Quais são os objetivos do Sistema de Avaliação Educacional do Piauí?
• O que o SAEPI avaliou em sua edição de 2011?
• Você acha que os resultados dessa avaliação podem ser utilizados para a melhoria da educação em nossa escola? Se sim, como?
Algumas características do SAEPI
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
O CAEd e o Sistema de Avaliação Educacional do Piauí?
Nessas avaliações, utilizam-se instrumentoschamados de testes de proficiência e tambémquestionários contextuais aplicados aos estudantes,professores e diretores das unidades escolares, como objetivo de oferecer à sociedade uma medida dodesempenho escolar.
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Como são construídos os testes de proficiência que permitem medir o
desempenho escolar?
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Objetivo
• Analisar e interpretar os resultados doSAEPI para (re)planejamento das açõespedagógicas implementadas em sala deaula, a serem definidas pelas escolasenvolvidas no processo de avaliação.
Seção 1
Matriz de Referência
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Matriz de Referência para Avaliação
Elemento base de origem dos testes utilizados no SAEPI.Garante legitimidade e transparência à avaliação.
É formada por um conjunto de descritores que, agrupadosem tópicos/temas, apresentam as habilidades consideradasbásicas e possíveis de serem aferidas por meio do instrumentoutilizado em avaliações em larga escala.
Não abarca todo currículo escolar. Por isso, não pode serconfundida com parâmetros curriculares, Base CurricularComum - BCC, procedimentos ou estratégias de ensino ouOrientações Teórico-Metodológicas - OTM, nem com o conteúdoa ser trabalhado pelo professor em sala de aula.
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
• Constitui um parâmetro de orientação;
• Apresenta o objeto da avaliação;
• Caráter de universalidade;
• Orienta a elaboração de itens.
Como a Matriz de Referência dá origem aos testes?
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Ressaltamos que as matrizes de referência nãoenglobam todo o currículo escolar .
Um recorte é feito com base no que é possívelaferir por meio do tipo de instrumento demedida utilizado na avaliação e que, ao mesmotempo, é representativo do que estácontemplado nos currículos .
A Matriz de Língua Portuguesa está estruturada em tópicos:
I о Procedimentos de Leitura;II – Implicações do suporte, do Gênero e/ou doEnunciador na Compreensão do Texto;III – Relação entre Textos;IV – Coerência e Coesão no Processamento doTexto;V – Relações entre Recursos Expressivos e Efeitosde Sentido;VI – Variação Linguística.
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
• Concepções que fundamentam
• a construção da matriz de Linguagens e códigos
Língua: interação entre sujeitos em contextos sociaisespecíficos.
Letramento: práticas sociais de leitura e escrita que seconstituem na interação entre sujeitos ou grupos de sujeitos.
Papel da escola: instância de aprendizagem da escrita em seusaspectos gráficos e formais e de vivências de práticas deletramento.
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Matriz de Referência para Avaliação
Elemento base de origem dos testes utilizados no Avalie EnsinoMédio. Garante legitimidade e transparência à avaliação.
É formada por um conjunto de descritores que, agrupados emtópicos/temas, apresentam as habilidades consideradas básicas epossíveis de serem aferidas por meio do instrumento utilizado emavaliações em larga escala.
Não abarca todo currículo escolar. Por isso, não pode ser confundidacom parâmetros curriculares, Base Curricular Comum - BCC,procedimentos ou estratégias de ensino ou Orientações Teórico-Metodológicas - OTM, nem com o conteúdo a ser trabalhado peloprofessor em sala de aula.
Algumas interpretações teóricas
Competências e Habilidades
Competências referem-se às diferentes modalidadesestruturais da inteligência que compreendem determinadasoperações que o sujeito utiliza para estabelecer relações com eentre os objetos físicos, conceitos, situações, fenômenos epessoas.
As habilidades instrumentais referem-se especificamente aoplano do saber fazer e decorrem, diretamente, do nível estruturaldas competências já adquiridas e que se transformam emhabilidades.
PERRENOUD, P. Práticas pedagógicas, profissão docente e formação. Lisboa: Dom
Quixote, 1993
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Aspectos a considerar sobre Descritores
• Os descritores têm origem na associação entre osconteúdos curriculares e as operações mentaisdesenvolvidas pelo aluno que se traduzem em certashabilidades.
• Constituem uma sumária “descrição” das habilidades esperadas ao final de cada período escolar avaliado.
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
O QUE É UM ITEM?
• É uma questão do teste de larga escala.• Avalia uma única habilidade, portanto o item é
unidimensional.• Obtém um resultado por estudante, que
permite avaliar as hipóteses levantadas por ele.
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Aspectos a considerar sobre Descritores
ͻDescreve cada uma das habilidades da Matriz
ͻ Avalia apenas uma única habilidade
ͻ Representa uma subdivisão de acordo com o conteúdo, competências de área e habilidades.
ͻ Agrupa as habilidades passíveis de avaliação em um teste de proficiência.
MatrizTema Tópico
DescritorItem
Das Matrizes aos itens dos testes de proficiência
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Considerar
Grau de Dificuldade – diz respeitoà adequação ent re a formulaçãodo item e a capacidade deresposta do estudante.
Discriminação – capacidade doitem de dist inguir estudantescom diferentes níveis dehabilidade.
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Comando
Distratores
Gabarito
O ITEM E SUAS PARTES
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Suporte
EnunciadoSuporte
DistratoresDistratores
Gabarito
Distratores Comando
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
- enfocar uma única situação-problema;- incluir no enunciado uma f igura, um
recorte de j ornal ou revista, uma fotografia,ua elaboração;
- redigir o enunciado de forma direta e af irmat iva;
- ut ilizar vocabulário adequado ao nível de escolaridade do estudante;
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
- excluir qualquer referência discriminatória quanto a etnia;
religião, gênero ou orientação sexual;- observar as normas da ABNT na
apresentação de textos e f iguras;- não ut ilizar “ pegadinhas” nem “ dicas” ;
- não ut ilizar termos como “ sempre” , “ nunca” , “ todo” ,
“ totalmente” .
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
estar diretamente relacionada a um único descritor da Mat riz de Referência;
formular de maneira posit iva;
a tarefa desej ada em conexão com o problema proposto.
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Quanto à Redação
Enunciado: deve ser claro, preciso e conciso.
Gabarito: exclusivamente um.
Dist ratores: devem ser plausíveis.
Suportes: devem conter informações relevantes.
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Atividade 1: Os Itens do Teste
Resolvam os itens.
Identifiquem a habilidade avaliadapelo item em análise.
Elaborem hipóteses cognitivas paraos distratores (alternativas erradas).
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Descritor:D20 - Reconhecer diferentes formas de tratar uma informação na comparação de textos que tratam do mesmo tema, em função das condições em que ele foi produzido e daquelas em que será recebido.
Gabarito:B
Gabarito: D
Descritor: D7 - Identificar a tese de um texto.
Gabarito: C
Descritor: D9 - Diferenciar as partes principais das secundárias em um texto.
Gabarito: E Descritor: D14 - Distinguir um fato da opinião relativa a esse fato.
Gabarito:C
Descritor:D12 - Identificar a finalidade de textos de diferentes gêneros.
Gabarito: A
Descritor: D15 - Estabelecer relações lógico-discursivas presentes no texto, marcadas por conjunções, advérbios etc.
Gabarito: A
Descritor: D19 - Reconhecer o efeito de sentido decorrente da exploração de recursos ortográficos e/ou morfossintáticos.
Gabarito: D
Descritor:D21 -Reconhecer posições distintas entre duas ou mais opiniões relativas ao mesmo fato ou ao mesmo tema.
Gabarito: C
Descritor: D10 - Identificar o conflito gerador do enredo e os elementos que constroem a narrativa.
Gabarito: E
Descritor: D1- Localizar informações explícitas em um texto.
Gabarito: C
Descritor: D6 - Identificar o tema de um texto.
Gabarito: B
Descritor: D2 - Estabelecer relações entre partes de um texto, identificando repetições ou substituições que contribuem para a continuidade de um texto
Gabarito:C
Descritor:D11 - Estabelecer relação causa/consequência entre partes e elementos do texto.
Gabarito: E
Descritor: D3 - Inferir o sentido de uma palavra ou expressão.
Gabarito: A
Descritor: D8 - Estabelecer relação entre a tese e os argumentos oferecidos para sustentá-la
Gabarito: C
Descritor:D13 - Identificar as marcas linguísticas que evidenciam o locutor e o interlocutor de um texto.
Gabarito: B Descritor:D4 - Inferir uma informação implícita em um texto.
Gabarito: C
Descritor:D5 - Interpretar texto com auxílio de material gráfico diverso (propagandas, quadrinhos, foto etc.).
Gabarito: B
Descritor: D16 - Identificar efeitos de ironia ou humor em textos variados.
Gabarito:E
Descritor: D17 - Reconhecer o efeito de sentido decorrente do uso da pontuação e de outras notações.
Gabarito: B
Descritor:D18 -Reconhecer o efeito de sentido decorrente da escolha de uma determinada palavra ou expressão.
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Acertos por descritor – SAEPI – LP 3EM
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
38,7 37,3 59,7 39,0 44,3 38,2 42,8 40,0 47,4 50,6 55,2 41,9 45,4 41,3 33,3 42,2 32,3 45,4 36,4 37,2 32,4 42,234,3 35,7 54,4 35,2 38,6 30,2 44,9 36,2 42,1 48,7 51,1 39,1 43,8 39,6 32,4 41,2 27,2 37,7 33,8 33,1 39,6 39,1
0,0
10,0
20,0
30,0
40,0
50,0
60,0
70,0
80,0
90,0
100,0
D01 D02 D03 D04 D05 D06 D07 D08 D09 D10 D11 D12 D13 D14 D15 D16 D17 D18 D19 D20 D21 Total
Interpretação pedagógicados resultados
Seção 2
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Escala de Proficiência
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
INSERIR SLIDES SEGUINDO Modelo_Escala
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Básico225-275
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Básico225-275
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Formas de Apresentação dos Resultados
Proficiência média – médias comparadas
Participação
Distribuição do percentual de alunos por nível de proficiência e padrão de desempenho
Evolução do percentual de alunos por padrão de desempenho
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Como você interpreta a posição de “sua” escola?
Vamos observar a escala...
Vamos localizar as proficiências médias na escala de proficiência?
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
ESCOLA254,50
ESTADO236,10
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Estado Escola
Estado
Escola
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Participação
Como você interpreta a participação do Estado e de “sua” Escola?
O que significa cada um desses dados numéricos?
PARTICIPAÇÃO
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
ParticipaçãoPARTICIPAÇÃO
Agora observe o percentual de participação da “sua” GRE e “sua “ escola.
Quantos alunos não participaram da avaliação nesta Coordenadoria?
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
De que forma você acha que a participação pode interferir nos resultados de nossa escola?
Pense em aspectos positivos e negativos!
Participação
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Distribuição do percentual de alunos por nível deproficiência e padrão de desempenho
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Distribuição do percentual de alunos por nível deproficiência e padrão de desempenho
Quais são as habilidades desenvolvidas por aproximadamente 43,4% dos estudantes?
E por 35,8% dos estudantes? E por 17,6% dos estudantes? E por 3,2% dos estudantes?
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Distribuição do percentual de alunos por nível deproficiência e padrão de desempenho
ABAIXO DO BÁSICO
BÁSICO
ADEQUADO
AVANÇADO
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Distribuição do percentual de alunos por nível deproficiência e padrão de desempenho
Observe o desenvolvimento de algumas habilidades referentes a
padrões de desempenhos diferentes.
Cite algumas habilidades em cada padrão de desempenho,
mostrando o grau de complexidade maior e menor em
cada uma delas.
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Distribuição do percentual de alunos por nível deproficiência e padrão de desempenho
De acordo com o número de alunos que participaram da avaliação da escola, calcule:
Quantos alunos estão em cada Padrão de Desempenho
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Distribuição do percentual de alunos por nível deproficiência e padrão de desempenho
De acordo com o número de alunos que participaram da avaliação da escola, calcule:
Quantos alunos estão em cada Padrão de Desempenho
Número de alunos Percentual50 100%X 34%
Total de alunos por padrão de desempenhoAbaixo do básico: 17 alunosBásico: 16 alunosAdequado: 14 alunosAvançado: 3 alunos
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Distribuição do percentual de alunos por nível deproficiência e padrão de desempenho
17 alunos 16 14 3
OBS.: Quando os valores percentuais são arredondados, também teremos diferença no número de alunos!
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Cálculo... variação proporcional direta
? = x50. 34 = 100.x1.700 = 100.x1.700/100 = x
17= xX= 17
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Distribuição do percentual de alunos por nível deproficiência e padrão de desempenho
OBS.: Quando os valores percentuais são arredondados, também teremos diferença no número de alunos!
Abaixo do Básico: 17alunos (34%)Básico apresenta quatro percentuais: 4%,2%,10%,18% Calculando: 4%
2%10%18%
*Mesma conta anterior
2 15 9
? = x18. 50 = 100.x
900 = 100.x900/100 = x
9= xX= 9
(9 alunos)(5 alunos)
(2 alunos)(1 aluno) Número de alunos Percentual
50 100%X 18%
Padrões de desempenho
estudantil
Estabelecimento e monitoramento das metas de qualidade
educacional
Caracterização do desempenho escolar
Grau de realização das ações
educacionais
Políticas públicas voltadas à
promoção da equidade
Identificação do percentual de
alunos em risco pedagógico (evasão,
reprovação ou abandono)
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Vamos interpretar o resultado da sua escola?
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Como você interpreta a posição de “sua” escola em relação ao resultado do ESTADO?
Vamos localizar as proficiências médias na escala de proficiência?
Qual é a quantidade de estudantes do ESTADO em cada padrão de desempenho?
Qual é o percentual de estudantes do Estado que estão ABAIXO DO BÁSICO, BÁSICO, ADEQUADO e AVANÇADO?
Qual é a quantidade de estudantes da “sua” escola em cada padrão de desempenho?
Qual é o percentual de estudantes da “sua” ESCOLA que estão ABAIXO DO BÁSICO, BÁSICO, ADEQUADO e AVANÇADO?
Como você interpreta a participação de alunos no ESTADO e em “sua” escola? Essa participação é representativa?
Qual é o percentual de estudantes do ESTADO nos intervalos anteriores ao padrão de desempenho “Básico”? E na “sua” escola?
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Quais ações pedagógicas podemos
implementar em sala de aula para o
desenvolvimento de habilidades
nesses grupos de estudantes?”
De Rede: Planejamento e execução de políticas públicas;
Criação de metas de qualidade e equidade educacionais;
Implementação de medidas de responsabi-lização;
Políticas de incentivos diretos ou indiretos;Ações de formação continuada de
professores.
De Escola : Elaboração do projeto da escolaMonitoramento da qualidade de ensino Subsídio para avaliação institucional
Uso dos Resultados1. Gestor
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Uso dos Resultados2 . Professor
• Intervenção pedagógica
• Elaboração de projetos especiais
• Foco nos estudantes com dificuldades
• Ações de reforço escolar
• Planejamento das ações de sala de aula
• Visão proativa quanto ao desenvolvimento de habilidades e competências ao longo da educação básica
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
Uso dos Resultados3. estudante
• Acompanhamento individual do desempenho escolar pelos estudantes e seus familiares
• Informações sobre a qualidade dos serviços educacionais oferecidos
OFICINA DE APROPRIAÇÃO DE RESULTADOS SAEPI 2011
OFICINA DE APROPRIAÇÃO
DE RESULTADOS 2011