Slide 1

Programa Mais EducaoAvaliao de Impacto e Estudo Qualitativo

*** Esta apresentao prope-se a trazer um breve panorama do trabalho realizado e, para isso, omite diversos pontos metodolgicos e de aprofundamento que podem ser acessados nos manuscritos completos que sero publicados em breve.

Mais EducaoIniciativa do Governo Federal -> ampliar as oportunidades educativas e garantir o desenvolvimento integral aos alunos do Ensino Fundamental.

Escolas devem optar entre atividades predefinidas: 7 macrocampos (Acompanhamento Pedaggico; Educao Ambiental; Esporte e Lazer; Direitos Humanos em Educao; Cultura e Artes; Cultura Digital; Promoo da Sade)

Cada escola deve implantar no mnimo 3 e no mximo 6 dessas atividades -> obrigatrio o oferecimento de pelo menos uma atividade de Acompanhamento Pedaggico.

As atividades no contraturno podem ser desempenhadas dentro da prpria escola ou fora dela, a partir de parcerias com outras instituies

O programa financia (via PDDE) a aquisio de materiais, a contratao de monitores e custos de transporte e alimentao. *Estes macrocampos referem-se ao ano de 2008.

Critrios de seleo/elegibilidade (escolas)*:Critrios200820092010201120122013Baixo IDEB< 3,5 e da mdia municipal< 4,1Sim (baixo)< 4,2 (sries iniciais) e 3,8 (sries finais)< 4,2 (sries iniciais) e 3,8 (sries finais)< 4,6 (sries iniciais) e 3,5 (sries finais)Populao municipal> 200 mil (capitais e RM)> 100 (50)mil (capitais e RM)> 163 (90)mil (capitais e RM)> 18,844NoNoAlunos+ 99+ 99+ 99+ 99+ 99+ 99Compromisso Todos pela Educao e PDDESimSimSimSimSimSimParticipao anteriorNoSimSimSimSimS se IDEB < 3,5reas de vulnerabilidade socialSimSimSimSimPlano Brasil Sem Misria e ruraisRuraisBolsa FamliaNoNoNoNo+ 50% dos alunos+ 50% dos alunosOutros----Programa Escola AbertaTodos os municpios Mais Educao Escopo Avaliao de ImpactoObjetivos:

Investigar a eficcia do programa em elevar o aproveitamento escolar nas escolas participantes, no curto e no mdio prazo.Qualificar os efeitos mdios obtidos, a partir de uma anlise de efeitos heterogneos, -> possveis variaes no impacto de acordo especificidades de cada local.

Fontes de dados: INEP (Prova Brasil, Ideb, Censo Escolar); IBGE/Ipeadata (populao municipal, contas nacionais municipal, inflao); PNUD (IDHM); MEC/FNDE (Mais Educao: ano de adeso, custos, nmero de alunos participantes, macrocampos).

Perodo de anlise: 2008 2011

*Em caso de resultados consistentemente significativos e positivos.Turmas contempladas pela Prova Brasil e tambm anos crticos para repetncia e/ou abandono.

4Consideraes Avaliao de ImpactoLimitaes:So consideradas apenas as dimenses de aprendizagem (mensurada pela nota na Prova Brasil) e abandono, apesar dos diversos outros objetivos explcitos do Mais Educao (Estender a jornada escolar e melhor atender s necessidades de cada aluno; Combater o trabalho infantil, a explorao sexual e outras formas de violncia; Promover a cultura e a prtica esportiva; Aproximar famlias, escola e comunidade).H fatores no observveis e/ou no mensurveis que so relevantes para a avaliao. A fim de analisar um perodo mais extenso, observa-se um recorte particular, de cerca de 600 escolas (entrantes em 2008 e para as quais h dados disponveis).5Mtodo: diferenas em diferenas com pareamento por escore de propenso

1 vizinho mais prximoCom reposio

Grupo tratamento: escolas que aderiram ao programa em 2008 e permaneceram at 2011.

As escolas que aderiram em 2008, mas no permaneceram at 2011 foram excludas da anlise.Importante: conhecemos o ano de adeso de cada escola, mas no o momento em que as atividades do programa de fato se iniciaram. delay , em geral, de at 1 ano.

Grupo controle: escolas que, at 2011, ainda no haviam aderido ao programa.As escolas que aderiram em 2009, 2010 e 2011 foram excludas da anlise.Dentre as escolas elegveis para o grupo controle, escolheu-se aquelas mais parecidas com as escolas tratamento.*Este slide se refere ao CURTO PRAZO. Para as anlises de IMPACTO IMEDIATO, o procedimento usado anlogo. Avaliao de Impacto Estratgia de IdentificaoMtodo: diferenas em diferenas com pareamento por escore de propenso Avaliao de Impacto Estratgia de Identificao20072008200920102011GRUPO DE TRATAMENTO lPareamento (escolha do grupo de controle)Linha de base (coleta dos indicadores de impacto antes do programa)Adeso ao programaImpacto

ImpactoGRUPO DE CONTROLE I

GRUPO DE TRATAMENTO II Pareamento (escolha do grupo de controle)Linha de base (coleta dos indicadores de impacto antes do programa)Adeso ao programaImpactoGRUPO DE CONTROLE II Avaliao de Impacto IndicadoresIndicadores de Impacto:

Taxa de abandonoDesempenho em portugus (Prova Brasil)Desempenho em matemtica (Prova Brasil)

Heterogeneidade:

Cobertura do programa na escola(mdia da % de alunos participantes no perodo 2008-2011)Custo por aluno(mdia do valor R$/aluno participante no perodo 2008-2011)Macrocampos escolhidos(considerou-se aqueles escolhidos pela escola em ao menos 3 dos 4 anos analisados)Caractersticas dos municpios(PIB per capita, gasto total com educao e cultura, populao)5 anoMdiaVarivelFonteTratamentoControleControle Pareado*Durao da turma em horasCenso Escolar4,34,44,3% turmas com mais de 7 horas de duraoCenso Escolar0,020,020,03Taxa de abandono do 1 ciclo do EFCenso Escolar5,92,16,7Escola possui bibliotecaCenso Escolar0,750,650,73Escola oferece Ensino MdioCenso Escolar0,090,110,08Escola oferece crecheCenso Escolar0,040,030,04Escola oferece pr-escolaCenso Escolar0,40,40,3Nmero de salas existentes na escolaCenso Escolar13,010,812,5% turmas no turno da manhCenso Escolar0,50,60,5Nmero de alunos matriculados na escolaCenso Escolar924593849Tratamento de gua e esgoto na escolaCenso Escolar0,980,9980,997Diferena IDEB 2005 - 2007 (anos iniciais do EF)IDEB0,40,30,4IDEB IDEB3,5 4,33,5Escola possui computadoresCenso Escolar0,920,860,94Nmero de funcionrios da escolaCenso Escolar 65,3 44,862,7Escola possui quadra esportivaCenso Escolar0,550,530,55* Mdia ponderada pelo PSM Avaliao de Impacto - PareamentoEstatstica Descritivas para 2007 (perodo imediatamente anterior ao incio do programa):95 anoMdiaVarivelFonteTratamentoControleControle Pareado*Taxa de aprovao 1 ciclo EFCenso Escolar80,588,479,7Populao municipalIBGE1180426 788482850184***IDHMPNUD0,760,710,75Escola localizada em rea urbana Censo Escolar0,9970,9951,0Escola possui laboratrio de cinciasCenso Escolar0,140,090,16Escola possui laboratrio de informticaCenso Escolar0,50,40,4Escola possui sala de professoresCenso Escolar0,90,80,9Escola possui DVDCenso Escolar0,90,90,9Escola possui retroprojetorCenso Escolar0,70,60,7Escola fornece alimentao Censo Escolar0,91,00,9Nmero de salas utilizadasCenso Escolar 13,6 10,7 12,8% escolas estaduais Censo Escolar 0,270,290,23Nota mdia dos alunos em PortugusProva Brasil164176164Nota mdia dos alunos em MatemticaProva Brasil179194180Diferena nota Portugus 2005 - 2007Prova Brasil1,01,01,0Diferena nota Matemtica 2005 - 2007Prova Brasil10,58,611,3Nmero de observaes -61117263 385 Avaliao de Impacto - Pareamento109 anoMdiaVarivelFonteTratamentoControleControle Pareado*Durao da turma em horasCenso Escolar 4,34,54,3% turmas com mais de 7 horas de duraoCenso Escolar0,010,010,01Taxa de abandono do 2 ciclo do EFCenso Escolar12,05,211,4Escola possui bibliotecaCenso Escolar0,890,830,88Escola oferece Ensino MdioCenso Escolar0,40,50,4Escola oferece crecheCenso Escolar0,030,010,03Escola oferece pr-escolaCenso Escolar0,20,20,2Nmero de salas existentes na escolaCenso Escolar14,312,714,4% turmas no turno da manhCenso Escolar0,50,60,5Nmero de alunos matriculados na escolaCenso Escolar 1159849 1084*Tratamento de gua e esgoto na escolaCenso Escolar 0,991,0 1,0**Diferena IDEB 2005 - 2007 (anos iniciais do EF)IDEB0,30,20,3IDEB IDEB2,93,82,8Escola possui computadoresCenso Escolar0,960,940,98Nmero de funcionrios da escolaCenso Escolar 76,260,170,0***Escola possui quadra esportivaCenso Escolar0,70,70,7 Avaliao de Impacto - Pareamento119 anoMdiaVarivelFonteTratamentoControleControle Pareado*Taxa de aprovao 1 ciclo EFCenso Escolar68,082,367,1Populao municipalIBGE 13644397776051353460IDHMPNUD0,80,70,8Escola localizada em rea urbana Censo Escolar0,990,991,0Escola possui laboratrio de cinciasCenso Escolar0,30,30,3Escola possui laboratrio de informticaCenso Escolar0,60,70,7Escola possui sala de professoresCenso Escolar0,970,930,98*Escola possui DVDCenso Escolar0,90,90,9Escola possui retroprojetorCenso Escolar0,90,90,9Escola fornece alimentao Censo Escolar0,91,00,9Nmero de salas utilizadasCenso Escolar14,412,514,5% escolas estaduais Censo Escolar 0,60,70,6Nota mdia dos alunos em PortugusProva Brasil222230221Nota mdia dos alunos em MatemticaProva Brasil 229243 229Diferena nota Portugus 2005 - 2007Prova Brasil5,03,43,3Diferena nota Matemtica 2005 - 2007Prova Brasil1,61,0-0,2*Nmero de observaes -555 13404319 Avaliao de Impacto - Pareamento12Densidades Kernel ps pareamento:

5 ano

9 ano

2007 X 2011 e 2007X 20092009 X 2011 Avaliao de Impacto - PareamentoIMPACTOS MDIOS

*** p