ciclodecapacitaÇÃo!em!conceitosetÉcnicas!para … · cursos mds10, mds11, mds12 mds13, mds14,...
TRANSCRIPT
1
CICLO DE CAPACITAÇÃO EM CONCEITOS E TÉCNICAS PARA
ELABORAÇÃO DE DIAGNÓSTICOS, MONITORAMENTO E
AVALIAÇÃO DE PROGRAMAS
RELATÓRIO DE EXECUÇÃO CICLOS 3 E 4
Termo de Cooperação 001/2013 Ciclo de Capacitação em Conceitos e Técnicas Para Elaboração de Diagnósticos, Monitoramento e Avaliação de
Programas Sociais e Ações do MDS
Equipe Técnica CEGOV:
Aline Gazola Hellmann, Ana Carolina Ribeiro Ribeiro, Ana Julia Bonzanini
Bernardi, Bruno Quevedo Sivelli, Gabriela Perin, Gianna Vargas Reis Salgado
Dias, Giordano Benites Tronco, João Marcelo Conte Cornetet, Júlia da Motta,
Marco Cepik, Thiago Borne Ferreira.
2
Introdução .................................................................................................................................... 3
Resumo dos ciclos ......................................................................................................................... 4
Perfil dos selecionados ................................................................................................................. 6
Resultados ................................................................................................................................... 12
Avaliação do curso ...................................................................................................................... 17
Considerações dos alunos ........................................................................................................... 25
Considerações finais ................................................................................................................... 29
3
INTRODUÇÃO
O presente relatório tem como objeto dois ciclos de capacitação
desenvolvidos em parceria entre o Centro de Estudos Internacionais sobre
Governo (CEGOV-UFRGS) e o Ministério do Desenvolvimento Social e
Combate à Fome (MDS). Cada ciclo abrangeu três cursos:
1. Curso de Indicadores para Diagnóstico do SUAS e do Brasil Sem
Miséria
2. Curso em Conceitos e Instrumentos para Monitoramento de Programas
3. Curso em Conceitos e Técnicas para Avaliação de Programas
Os Ciclos em tela desenvolveram-se, marcadamente, no segundo
semestre do ano de 2015, mas consistiram em novas edições de cursos
realizados anteriormente e abordados em relatórios precedentes. Levando em
conta que uma série de questões importantes – como a Matriz Pedagógica e o
fundamento teórico de EAD – já foram exploradas em exaustão anteriormente,
este relatório prima por maior concisão, atendo-se às especificidades dos
cursos abordados.
A principal novidade introduzida diz respeito ao fato dos cursos
analisados serem “contínuos”. Diferentemente de edições anteriores, os alunos
contaram com liberdade para realizar os cursos 1, 2 e 3 e nos prazos que lhes
convinha. Nos Ciclos anteriores, era dado um prazo para o término do curso 1,
seguido de um intervalo de duração variável até o momento em que era
liberado o curso posterior, consequentemente até o término do Ciclo. Nos
Ciclos 3 e 4, o prazo foi único e amplo (mais de 4 meses), e cada aluno
realizou o curso como julgou melhor.
4
RESUMO DOS CICLOS
CICLO III CICLO IV
Cursos MDS10, MDS11, MDS12 MDS13, MDS14, MDS15
Tipo Contínuo Contínuo
Início 15 de junho de 2015 31 de agosto de 2015
Término previsto 27 de setembro de 2015 14 de dezembro de 2015
Término prorrogado 25 de outubro de 2015 17 de janeiro de 2016
Total de alunos 133 6.470
Acessaram até o término do curso
106 (80%)1 5.061 (78%)2
Tabela 1 – Dados gerais dos Ciclos 3 e 4.
Gráfico 1 - Percentual acumulado de alunos que já havia acessado por semana do Ciclo.
1 Acessou depois de 14 de junho de 2015. 2 Acessou depois de 31 de agosto de 2015. 2 Acessou depois de 31 de agosto de 2015.
0%
20%
40%
60%
80%
100%
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 Semanas
Percentual acumulado de alunos que acessou
Ciclo 3 Ciclo 4
5
A duração dos ciclos foi semelhante: 4 meses e 10 dias para o Ciclo 3 e
4 meses e 17 dias para o Ciclo 4. No Ciclo 4, foi concedido prazo um pouco
maior para compensar pelo período de feriados do fim do ano.
Com relação ao número de alunos, o Ciclo 3 contou com quantidade
bastante menor: 133 alunos contra 6.470 no Ciclo 4. O Ciclo 3, portanto, teve
características de turma piloto antes do lançamento de uma turma mais
numerosa com o Ciclo 4.
O acesso ao Moodle seguiu padrão semelhante em ambos os ciclos.
Inicialmente, ocorreu uma ascensão mais acelerada, iniciando de cerca de 50%
na semana inicial e estabilizando em patamar de cerca de 77% na semana 7.
Na semana final, a décima nona, o nível de acesso era de 80% do Ciclo 3 e de
78% no Ciclo 4, de modo que não se alterou substancialmente a partir da
sétima semana (Gráfico 1).
6
PERFIL DOS SELECIONADOS
De modo geral, o perfil dos alunos não só se assemelhou entre os dois
Ciclos aqui abordados, mas também refletiu o mesmo perfil de participantes
dos cursos anteriores ofertadas por meio da parceria CEGOV-SAGI. A principal
exceção encontra-se no caso das origens dos alunos do Ciclo 3,
predominantemente paulistas, o que se explica pelo fato de que os gestores
convidados a integrarem essa turma piloto são oriundos de uma repartição
específica baseada naquele Estado.
Observa-se, na frequência de gênero, que houve grande predominância
de mulheres entre os selecionados (Gráfico 2), reproduzindo-se o padrão das
edições anteriores da capacitação.
Frequência de gênero
Gráfico 2 – Frequência do gênero dos selecionados para ambos os ciclos
Com relação à a distribuição geográfica dos selecionados, a diferença
entre os dois ciclos é mais substancial. Enquanto os alunos do ciclo 3 são
92%
8%
Ciclo 3
Feminino. Masculino.
91%
9%
Ciclo 4
Feminino. Masculino.
7
oriundos sobretudo de São Paulo, a origem dos alunos do Ciclo 4 é mais
diversa (Gráfico 3).
Número de selecionados por estado
Gráfico 3 - número de selecionados por estado.
Ao colocarmos os dados referentes aos alunos do Ciclo 4 em um mapa,
evidencia-se a predominância de participantes nos Estados do Centro-Oeste,
do Nordeste e do Sul (Figura 1), o que se explica, em parte, por serem
unidades federativas de maior densidade populacional geral.
1 1 1 1 1 2 2 4 5 5 8 9
92
0
20
40
60
80
100
ES DF CE PI PE RN MA MG RJ MS BA AL SP
Ciclo 3
19 24 34 37 92 99 103 103 108 118 121 143
157 168 182 185 237 238 253 281 283
368 372
531 575
726
877
0
200
400
600
800
1000
AP RR RO AC TO DF GO AM AL SE PI PB SC ES MS MT MA PA RJ RN PE CE RS PR BA SP MG
Ciclo 4
8
Figura 1 - origem dos alunos do Ciclo 4 por Unidade da Federação.
Quando interpelados sobre se tinham alguma deficiência física, 2% dos
alunos do Ciclo 3 e 1% dos do Ciclo 4 responderam que sim. No caso do Ciclo
3, tratou-se de dois alunos, que especificaram suas deficiências: um deles com
“paralisia braquial do braço direito” e outro com “gonoartrose bilateral”. No Ciclo
4, 75 alunos declararam-se deficientes, 32 deles com deficiência física, 16 com
deficiência visual, 15 com deficiência auditiva e 12 com outras deficiências
(Gráfico 4).
9
Alunos com deficiência
Gráfico 4 - Selecionados com deficiência.
No que tange a escolaridade, os ciclos apresentam características
similares. A maioria dos alunos finalizou pós-graduação ou ensino superior. A
área de formação dos alunos também é semelhante: cerca de 75% deles
estudaram Serviço Social, cerca de 15% estudaram Psicologia, e os demais
distribuem-se em áreas múltiplas com percentuais reduzidos (Gráfico 5).
98%
2%
Ciclo 3
Não Sim
99%
1%
Ciclo 4
Não Sim
[CELLRANGE]; [VALOR]
[CELLRANGE]; [VALOR]
[CELLRANGE]; [VALOR] [CELLRANGE];
[VALOR]
0
5
10
15
20
25
30
35
Deficiência dsica Deficiência visual Deficiência audieva Outras deficiências
Deficiencias declaradas no Ciclo 4
10
Escolaridade e área de formação
Gráfico 5 - escolaridade e formação dos alunos.
Por fim, com relação à atuação profissional dos participantes no
momento do curso, a maioria compreendeu trabalhadores do SUAS. No caso
do Ciclo 4, a gama mais ampla de alunos refletiu-se em um universo mais
diverso de profissionais (Gráfico 6).
1% 7%
48%
35%
8% 1%
Ciclo 3
Doutorado.
Mestrado.
Pós-‐Graduação Latu Sensu (Especialização, aperfeiçoamento).
Ensino Superior.
Ensino Superior Incompleto.
Ensino Médio Completo.
1% 5%
45% 49%
Ciclo 4
Doutorado.
Mestrado.
Pós-‐Graduação Latu Sensu (Especialização, aperfeiçoamento).
Ensino Superior.
72%
14%
Ciclo 3
Serviço Social Psicologia
Administração. Sociologia.
Gestão Pública. Ciências Sociais
Administração Pública Políecas Públicas.
Jornalismo.
76%
16%
Ciclo 4
Serviço Social Psicologia
Administração. Ciências Sociais
Direito. Economia.
Gestão Pública. Administração Pública
Políecas Públicas.
11
Área de atuação profissional
Gráfico 6 - Área de atuação profissional.
78%
11%
11%
Ciclo 3
Trabalhador(a) do SUAS.
Gestor Municipal da Assistência Social.
Não trabalho no SUAS.
61% 19%
6% 5%
5% 4%
Ciclo 4
Trabalhador(a) do SUAS. Outro. Não trabalho no SUAS. Conselheiro(a) da Assistência Social. Gestor Municipal da Assistência Social. Estudante.
12
RESULTADOS
Alunos que concluíram a avaliação final
CICLO III CICLO IV
Diagnóstico 56 (42%) 1.805 (28%)
Monitoramento 45 (34%) 1.401 (22%)
Avaliação 41 (31%) 1.147 (18%)
Tabela 2 – alunos que concluíram a avaliação final em número absoluto e em percentual do total de alunos (sem excluir os evadidos).
Gráfico 7 - Percentual acumulado de concluintes da avaliação final
Diferentemente do que ocorreu com o acesso dos alunos ao Moodle, em
que houve similaridade nos Ciclos 3 e 4, verificaram-se padrões bem diferentes
nos percentuais de alunos que concluíram a avaliação final – e que, portanto,
chegaram ao fim do curso. No Ciclo 3, houve momentos de “saltos” nos
términos dos cursos: no curso 1, entre semanas 5 e 7; no curso 2, entre
0%
10%
20%
30%
40%
50%
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19
Semanas
Percentual acumulado de concluintes da avaliação final
Diagnóseco C4 Monitoramento C4 Avaliação C4
Diagnóseco C3 Monitoramento C3 Avaliação C3
13
semanas 11 e 15; no curso 3, entre semanas 13 e 16. No Ciclo 4, verificaram-
se curvas constantes de ascendência leve ao longo de todo o período. A única
semelhança consiste na aceleração tradicional nas semanas finais, mais
pronunciada, de qualquer forma, no Ciclo 3 (Gráfico 7).
Publicações nos fóruns
Cada Ciclo contou com 3 cursos, e cada curso contou com 3 fóruns:
Fórum de Apresentação, Fórum de Conteúdo, e Fórum de Ajuda Moodle. Em
ambos os ciclos, foi verificada uma participação maior nos fóruns de
apresentação e de conteúdo do que no fórum de ajuda do Moodle. As poucas
dúvidas devem-se à clareza da plataforma e do material instrucional, em adição
ao fato de que muitos alunos já haviam realizado cursos anteriormente (Gráfico
8).
Gráfico 8 - total de publicações nos fóruns Apresentação, Conteúdo, Ajuda Moodle em número
absoluto, com os ciclos dispostos em eixos distintos para permitir a comparação.
0
500
1000
1500
2000
2500
3000
0
10
20
30
40
50
60
70
Fórum de Apresentação Fórum de Conteúdo Fórum de Ajuda Moodle
Ciclo 4
Ciclo 3
Publicações nos fóruns Apresentação, Conteúdo e Ajuda Moodle
Ciclo 3 Ciclo 4
14
Verificou-se, ademais, padrão análogo nos ciclos 3 e 4 no que se refere
à participação maior no curso 1, intermediária no curso 2 e menor no curso 3
(Tabela 3). Esse padrão reflete o número menor de alunos que realizaram os
cursos 2 e 3.
CICLO III CICLO IV
Diagnóstico 68 (51,1%) 3.050 (47,1%)
Monitoramento 50 (37,6%) 1.742 (26,9%)
Avaliação 30 (22,5%) 912 (14,1%)
Tabela 3 – total de publicações nos fóruns em número absoluto e em percentual do total de alunos (sem excluir os evadidos). Inclui os três fóruns de cada curso (Apresentação, Conteúdo,
Ajuda Moodle).
No caso do curso 4, foi feito acompanhamento semanal dos fóruns, o
que permitiu a constatação de um padrão. Assim como se observou nas
conclusões da avaliação final, ficou claro a participação maior no primeiro curso
em um primeiro momento, no segundo curso em um segundo momento e no
terceiro curso em um terceiro momento. Evidencia-se, portanto, que, ainda que
seja dada aos alunos a possibilidade de realizar o ciclo na ordem que
quiserem, a tendência é de que optem pela sequência tradicional (Gráfico 4).
15
Gráfico 9 – total de publicações nos fóruns em número absoluto do Ciclo 4. Cada curva inclui
os três fóruns de cada curso (Apresentação, Conteúdo, Ajuda Moodle).
0
500
1.000
1.500
2.000
2.500
3.000
3.500
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19
Semanas
Total acumulado de publicações em fóruns do Ciclo 4
Diagnóseco Monitoramento Avaliação
16
Resultados finais
CICLO 3
Diagnóstico Monitoramento Avaliação
CICLO 4
Diagnóstico Monitoramento Avaliação
Gráfico 10 - Resultados finais.
5, 4%
51, 38%
50, 38%
27, 20%
Reprovados na AF
Aptos à cer;ficação
Não fizeram AF
Evadidos
3, 2% 42,
32%
61, 46%
27, 20%
Reprovados na AF
Aptos à cer;ficação
Não fizeram AF
Evadidos
1, 1% 40,
30%
65, 49%
27, 20%
Reprovados na AF
Aptos à cer;ficação
Não fizeram AF
Evadidos
133, 2% 1672,
26%
3256, 50%
1409, 22%
Reprovados na AF
Aptos à cer;ficação
Não fizeram AF
Evadidos
157, 2% 1244,
19%
3660, 57%
1409, 22%
Reprovados na AF
Aptos à cer;ficação
Não fizeram AF
Evadidos
157, 2% 990,
15%
3914, 61%
1409, 22%
Reprovados na AF
Aptos à cer;ficação
Não fizeram AF
Evadidos
17
AVALIAÇÃO DO CURSO
A avaliação do curso (ou avaliação de reação) consiste em um
formulário disponibilizado no próprio Ambiente Virtual de Aprendizagem. Sua
finalidade é avaliar a estrutura do Curso, a qualidade e pertinência de seus
materiais, a navegação no AVA e aspectos gerais em relação ao andamento
das aulas. O objetivo é colher o feedback dos alunos com vistas ao
aperfeiçoamento deste e de outros cursos que venham a ser realizados. A
avaliação é preenchida de maneira anônima pelos alunos. Tendo em vista as
opiniões similares encontradas nos três cursos de cada ciclo, vamos nos ater à
avaliação que contou com o maior número de participações, a do curso
MDS13, considerada representativa dos ciclos analisados.
O formulário continha 37 perguntas. Dado o requisito de completá-lo
para a obtenção do certificado, todos os concluintes realizaram a pesquisa,
totalizando 1.686 participações. A avaliação do curso foi dividida em 06
temáticas: a) Identificação funcional; b) Avaliação do Ambiente Virtual; c)
Estrutura do curso; d) Sistemática de avaliação de aprendizagem; e) Conteúdo;
f) Avaliação do Ciclo de Capacitação. Abaixo, segue o resumo das respostas.
18
IDENTIFICAÇÃO FUNCIONAL
Qual o seu cargo na instituição em que trabalha?
Grau de instrução (assinale o maior grau de instrução completo):
72%
16%
8% 4%
Assistente Social
Psicólogo
Coordenador
Pedagogo
51% 41%
7%
1% 0%
Especialização
Graduação
Mestrado
Doutorado
Ensino Médio
19
AVALIAÇÃO DO AMBIENTE VIRTUAL
Você já realizou outro curso EAD além deste?
Você teve dificuldades para acessar o ambiente virtual do curso?
25%
75%
Não
Sim
94%
6%
Não
Sim
20
Como você avalia cada um dos seguintes itens referentes ao ambiente virtual
do curso?
Quantas vezes você participu dos Fóruns do curso?
0% 0% 0% 0% 0% 0% 1% 1% 2% 3% 1% 1%
30% 20%
31% 31% 25%
18%
69% 80%
67% 65% 73%
81%
0%
10%
20%
30%
40%
50%
60%
70%
80%
90%
100%
Layout (desenho do ambiente)
Texto de apresentação do
curso
Navegação no ambiente
Ícones (facilidade de compreensão)
Velocidade das respostas do ambiente
eletrônico às minhas ações
Layout do Caderno de Estudos
Inadequado Pouco adequado Relaevamente adequado Perfeitamente adequado
49%
9%
42% Em 3 aulas ou menos
Em 4 aulas ou mais
Nenhuma vez
21
Os Fóruns contribuíram para promover um espaço de debates e trocas de
experiência entre você e seus colegas?
Alguma vez você necessitou de apoio técnico para tirar dúvidas de conteúdo ou
da plataforma?
555
481
410
240 Contribuíram poucas vezes
Nunca contribuíram
Contribuíram na maiorias das vezes
Sempre contribuíram
87%
13%
Não
Sim
22
Lembrando que as informações não serão identificadas, quando você mais
utilizou o ambiente virtual de aprendizagem?
ESTRUTURA DO CURSO
Em relação ao curso, você considera que foi bem informado sobre:
67%
33%
Após a jornada de trabalho
Durante a jornada de trabalho
1% 6% 3% 2%
99% 94% 97% 98%
0%
20%
40%
60%
80%
100%
120%
Os objeevos do curso e de cada
aula?
O cronograma de desenvolvimento?
A dinâmica de estudo (estudos individuais,
exercícios, fórum, avaliação final)?
A avaliação de seu desempenho?
Não Sim
23
CONTEÚDO
Em relação às atividades pedagógicas, assinale:
Em relação à pertinência dos conteúdos, assinale as afirmações conforme sua
realidade:
76% 64% 61%
13%
12% 21%
10% 24% 18%
0% 10% 20% 30% 40% 50% 60% 70% 80% 90% 100%
Li os textos indicados pela leitura complementar (Leia
+)
Uelizei os recursos do Saiba Mais
Uelizei os tutoriais e vídeos
3 vezes ou menos 4 vezes ou mais Nunca
1% 1% 1% 1% 1% 21% 21% 25% 27% 16%
78% 78% 74% 72% 83%
0%
20%
40%
60%
80%
100%
Associei os conteúdos do curso
aos meus conhecimentos
anteriores
Associei os conteúdos do curso
às minhas experiências práecas
Procurei, no meu dia-‐a-‐dia, situações
em que fosse possível aplicar o conteúdo do curso
Os conteúdos do curso facilitaram a compreensão e uelização das ferramentas do Portal SAGI
Os exercícios e a prova final estão claros e de acordo com o conteúdo
ensinado
Não concordo Concordo parcialmente Concordo plenamente
24
36 De acordo com a escala de 1 a 5 (1 - Muito Ruim; 2 - Ruim; 3 - Regular; 4 -
Bom; 5 - Muito Bom), que nota você dá ao curso?
Obs.: nenhum aluno escolheu “Muito ruim”, de modo que não consta no gráfico.
74%
25%
1% 0%
Muito Bom
Bom
Regular
Ruim
25
CONSIDERAÇÕES DOS ALUNOS
A última pergunta da avaliação do curso convidava os alunos a deixar
considerações sobre as atividades:
Agradecendo sua participação, deixamos espaço para outras
considerações que queira fazer.
De modo aleatório3, selecionamos 45 dos 851 comentários deixados nesse
campo para considerações finais:
1. Gostei muito do curso
2. Agradeço a todos que se esforçaram para proporcionar este ambiente
de aprendizado para nós. Está sendo de grande valia para mim.
Parabéns!!
3. Muito gratificante poder ter essa oportunidade em fazer esse curso. Que
venha mais e mais!!
4. Obrigada pela oportunidade!
5. obrigada pelo aprendizado eternizado! muito satisfeita...
6. Muito bom esse trabalho para o nosso aprendizado no dia dia e nossa
capacidade.
7. Que os próximos cursos sejam informados por email para aqueles que
concluiram o curso com êxito
8. Muito obrigada pela oportunidade.
9. O curso proporcionou uma experiência satisfatória no que diz respeito a
novos conhecimento sobre o SUAS, e melhor entendimento da
realidade.
10. Parabéns a todos os colaboradores do curso, estou muito satisfeita.
Parabéns a todos pela organização. Abraços Edivania
3 Foram utilizados os serviços da plataforma RANDOM.ORG (https://www.random.org/).
26
11. Foi maravilhoso! Adorei a didática.
12. Adorei fazer esse modulo, pois conheci assunto no qual não dominava
muito bem...estou muito feliz e realizada com o curso...obrigada pela
oportunidade.
13. agradeço pela oportunidade esta estar fazendo o curso
14. Curso de grande proveito, que favoreçam outros cursos.
15. curso foi muito bom.
16. O curso ampliou meus conhecimentos sobre a Rede Socioassistencial.
17. Embora não lide diretamente com o as ações do BSM em meu
município, fiquei absolutamente satisfeito com o material e informaçōes
obtidas. Espero que os cursos de Monitoramento e Avaliação possam
reforçar em mim, enquanto profissional, conceitos, metodologias e
instrumentos que aperfeiçõem o meu trabalho.
18. Instrumento valioso de trabalho para melhorar aplicação do
conhecimento no cotidiano, e principalmente a vida das pessoas que
necessitam do SUAS.
19. Adorei fazer o curso, aumento meus conhecimentos sobre o BSM e as
questões relativas a Assistência Social no Brasil. Contribuirá com
certeza na minha prática.
20. Nos cursos anteriores do MDS o tutor sempre informou inicio e termino
do curso. Nesse, em nenhum momento recebei mensagem tutorial
deixando a desejar.
21. Parabéns pelo curso! Contribuiu de forma significativa para novos
conhecimentos.
22. aproveitamento satisfatório.
23. Curso muito bom com materiais de clara compreensão. Consegui fazer
um link com o meu cotidiano de trabalho.
24. Foi de grande importância para adquirir mais conhecimentos e ajudar
nos trabalhos desenvolvidos.
27
25. Curso ótimo!!!! Possibilita ampliar os conhecimentos e aplicar no dia a
dia de trabalho.
26. Muito obrigada pela oportunidade de realizar este curso. Linguagem
fácil, excelente conteúdo, saio melhor do que entrei. Muito obrigada!
27. AGRADEÇO A OPORTUNIDADE
28. O curso é ótimo e deveria ter sempre!!
29. De grande aproveitamento pessoal e profissional.
30. Adorei participar do curso. Muito produtivo.
31. Momento de grande importancia que facilita o conhecimento no dia a
dia.
32. O curso foi muito bom, possibilitou a visão do é feito na prática e
conhecer algumas ferramentas que são ultilizadas e eu não conhecia.
33. Curso muito proveitoso! Adorei, adquiri muito conhecimento!
recomendo!!!
34. O curso foi muito interessante e esclareceu dúvidas, bem como trouxe
novos questionamentos acerca do tema trabalhado.
35. Esse curso foi ótimo para ampliar meu conhecimento prático,
principalmente na utilização da ferramentas para diagnóstico. Agradeço
a oportunidade que o MDS me proporcionou..
36. gostei bastante do curso, no qual contribuiu significativamente na minha
vida profissional, gostaria de ter participado mais dos fóruns, pois as
vezes só lia os comentários dos colegas e assistia os vídeos.
37. O formato do curso de forma leve e sem pressões é interessante para o
bom desempenho do aluno.
38. Agradeço a oportunidade para ampliar meus conhecimentos!
39. Obrigado pela oportunidade, peço desculpa pelas vezes que tive
dificuldades para concluir as atividades.
40. Agradeço a oportunidade de participar e já disponho o meu interesse em
participar de outras oportunidades, pois contribuíram bastante com meu
aprendizado e postura profissional. Obrigada!
28
41. Foi contributivo para minha formação.
42. Parabéns aos tutores e aos professores que elaboraram o Curso, o
conteúdo foi excelente, e contribuiu muito para o exercício de meu
trabalho diário, pois muitos conceitos acabei aprendendo através do
Curso. Tirei muitas dúvidas, realmente o curso foi realizado em um
excelente período no exercício de minhas atividades.O material é
magnifico, imprimi todoe encadernei para ter de apoio. Obrigado.
43. Parabéns! Continue nos proporcionando mais cursos que nos auxilie
nessa área social.
44. Parabéns, adorei o curso.
45. Curso muito bom, tenho certeza que irei aproveitar bastante este
conhecimento.
29
CONSIDERAÇÕES FINAIS
Para comparar os resultados dos Ciclos contínuos com os de cursos
antigos não contínuos, é preciso que façamos antes uma observação técnica
relativa à nova metodologia de cálculo da taxa de êxito, uma vez que deixamos
de considerar a categoria “desistentes”. A taxa de êxito (ou taxa de sucesso)
consiste no indicador utilizado pela equipe Cegov-MDS para demonstrar o
percentual de alunos certificados em um determinado curso. Ao longo dos nove
cursos anteriores (do MDS01 ao MDS09), utilizou-se a seguinte fórmula de
cálculo:
𝑇𝑎𝑥𝑎 𝑑𝑒 ê𝑥𝑖𝑡𝑜 𝑎𝑛𝑡𝑖𝑔𝑎 =𝑎𝑙𝑢𝑛𝑜𝑠 𝑎𝑝𝑟𝑜𝑣𝑎𝑑𝑜𝑠
𝑡𝑜𝑡𝑎𝑙 𝑑𝑒 𝑖𝑛𝑠𝑐𝑟𝑖𝑡𝑜𝑠 − 𝑒𝑣𝑎𝑑𝑖𝑑𝑜𝑠 − 𝑑𝑒𝑠𝑖𝑠𝑡𝑒𝑛𝑡𝑒𝑠
Os EVADIDOS são aqueles que jamais acessaram o curso. Como não
tiveram contato com o material, o fato de que não foram aprovados não reflete
alguma característica do curso, como sua dificuldade ou clareza dos materiais.
Os DESISTENTES eram aqueles que acessaram apenas nos primeiros dias do
curso. Esses dias eram calculados a partir de uma fração do tempo total de
cada curso.
Com o advento dos cursos em formato de Ciclo Contínuo, incluindo o
Ciclo 3 (MDS10, MDS11, MDS12) e o Ciclo 4 (MDS13, MDS14 e MDS15),
surgiu uma dificuldade para o cálculo dos desistentes: como os três cursos de
cada ciclo aconteciam simultaneamente, não havia como estimar desistentes
para cada um deles. Essa dificuldade, somada ao fato de que a subtração de
desistentes não é comum na literatura sobre cursos EAD, incentivou a exclusão
desse expediente na nova taxa de êxito dos cursos:
𝑁𝑜𝑣𝑎 𝑡𝑎𝑥𝑎 𝑑𝑒 ê𝑥𝑖𝑡𝑜 =𝑎𝑙𝑢𝑛𝑜𝑠 𝑎𝑝𝑟𝑜𝑣𝑎𝑑𝑜𝑠
𝑡𝑜𝑡𝑎𝑙 𝑑𝑒 𝑖𝑛𝑠𝑐𝑟𝑖𝑡𝑜𝑠 − 𝑒𝑣𝑎𝑑𝑖𝑑𝑜𝑠
30
Com a nova metodologia, as taxas de êxito dos cursos já concluídos
foram recalculadas, verificando-se uma redução do êxito dos cursos avulsos,
realizados anteriormente (Gráfico 11). A média geral orbita em 50%. Apesar da
redução com relação à metodologia anterior, as taxas continuam razoáveis: a
média de 50% é considerada satisfatória pela literatura específica para cursos
EAD, que são marcados por evasão relativamente alta.
Gráfico 11 - Comparação de taxas de êxito segundo as metodologias antiga e nova
Com a nova metodologia, a média do êxito dos cursos ficou em 50%
para os cursos anteriores avulsos, um pouco superior à média de 41% dos três
cursos do Ciclo 3 e bastante superior à média de 26% dos três cursos do Ciclo
4 (Gráfico 12). Essa redução pode indicar um êxito menor no modelo de ciclo
contínuo, além de ser influenciada por uma redução constante do êxito ao
longo do projeto, vide linha de tendência tracejada em vermelho no Gráfico 12.
Essa redução constante está relacionada ao fato de que os alunos se
inscrevem mais de uma vez em um determinado curso e acabam não
realizando quando percebem que já haviam completado, de que resulta o
desempenho decrescente.
85%
71% 77%
60%
76% 72%
50%
64%
42% 50%
43%
64% 54% 52% 56%
41%
57%
32%
0%
20%
40%
60%
80%
100%
MDS01 MDS02 MDS03 MDS04 MDS05 MDS06 MDS07 MDS08 MDS09
Comparação de taxas de êxito anega e nova
Taxa de êxito anega Taxa de êxito nova
Taxa de êxito antiga
Taxa de êxito nova
31
Gráfico 12 - Taxa de êxito comparada segundo nova metodologia
Portanto, os relatórios emitidos a partir da atual data contarão com a
nova metodologia, mais alinhada com àquela adotada pela literatura específica,
com números que compreendem a realidade do universo de alunos de forma
mais apurada. Dúvidas podem ser esclarecidas a qualquer momento por meio
do contato com a equipe Cegov-MDS.
Descontando-se os evadidos, as taxas de aprovação do Ciclo 3 foram
superiores às do Ciclo 4 em todos os 3 cursos (Gráfico 10). Alguns fatores
potenciais foram identificados pela equipe do CEGOV e seguem dispostos por
ordem de probabilidade (1 - mais provável; 3 - menos provável):
1. Período de execução favoreceu Ciclo 3 – o Clico 4 transcorreu no fim
do ano, período em que muitos gestores têm menos disponibilidade ou
estão de férias;
2. Alunos que já haviam feito o curso matricularam-se novamente no Ciclo 4 - nessa altura, grande parte do público potencial já realizou os
cursos, e muitos alunos matricularam-se no Ciclo 4 e abandonaram-no
quando percebem que já haviam realizado seus cursos;
3. Dificuldade para comparar a turma piloto (cerca de 130 alunos) com a turma do Ciclo 4 (cerca de 6.500) - talvez precisemos pensar em
50% 43%
64% 54% 52% 56%
41%
57%
32%
47% 39% 37% 33%
25% 20%
0% 10% 20% 30% 40% 50% 60% 70%
Taxa de êxito comparada
32
turmas pilotos com até 1.000 alunos. O acompanhamento de 130 alunos
acaba sendo mais próximo o que pode conduzir a resultados
anormalmente positivos.
Dessa forma, conclui-se que o modelo de ciclo contínuo produz
resultados um pouco inferiores àqueles produzidos pelo modelo anterior, sem
um prazo único para conclusão de todos os ciclos do curso. Além disso, apesar
dos altos níveis de satisfação dos alunos, verificados na avaliação do curso
exposta anteriormente, verifica-se uma tendência de êxito crescentemente
menor dos ciclos, o que pode indicar um exaurimento do público potencial da
capacitação, que não inclui a totalidade dos funcionários do Sistema Único de
Assistência Social, mas, sim, o percentual desses funcionários que tem
disponibilidade para realizar os cursos, meios para acessá-lo e interesse na
área de monitoramento e avaliação.