(Proposta elaborada pela CPA)(Proposta elaborada pela CPA)

Novembro, 2007

Profa. Dra. Kátia Sgrillo ksgrillo@unimep.br

Profa. Dra. Kátia Sgrillo ksgrillo@unimep.br

Não é possível melhorar o que não se conhece…

avaliação institucionalavaliação institucional é uma excelente ferramenta de ferramenta de

diagnósticodiagnóstico e de correção de rumoscorreção de rumos.

A avaliação institucional quando aplicada às Instituições de Ensino Superior - IES, é um processoprocesso de regulação do ensino superior, dentro de uma abordagem construtivaabordagem construtiva e dialógica.

ÉÉ o Sistema Nacional de Avaliação de Educação Superior !! o Sistema Nacional de Avaliação de Educação Superior !!

A Comissão Especial de Avaliação apresentou a proposta original do SINAES ao MEC em 27 de agosto de 2003. Após amplo debate nos fóruns de reitores e pró-reitores, nos sindicatos, nas sociedades científicas, na mídia, na academia, no parlamento e na sociedade em geral, surgiram contribuições que alteraram a proposta original, convergindo ao texto da Lei no 10.861 de 14 de abril de 2004, aprovado na Câmara do Deputados e no Senado.

Lei no 10.861Institui o Sistema Nacional de Avaliação da Educação Superior – SINAES e dá outras providencias

TODATODA comunidade acadêmica, coordenada pela CPA –

Comissão Própria de Avaliação.

Membros da CPA (Lei 10.861 de 14 de Membros da CPA (Lei 10.861 de 14 de abril de 2004) :abril de 2004) :

“Colegiado de atuação autônomaatuação autônoma em relação aos conselhos e demais colegiados e órgãos da Universidade, com representação de todos os representação de todos os segmentos da comunidade universitáriasegmentos da comunidade universitária, vedadavedada a composição que privilegie a maioria absoluta de um dos segmentos”

(Lei 10.861Lei 10.861)

1. A Missão e o Plano de Desenvolvimento Institucional (PDI)

2. O Ensino (Graduação e Pós-graduação), a Pesquisa e a Extensão

3. Responsabilidade Social (inclusão social)

4. Comunicação com a sociedade

5. Pessoal

6. Organização e Gestão da Instituição

7. Infra-estrutura

8. Planejamento e Avaliação

9. Atendimento aos Egressos

10. Sustentabilidade Financeira

Que análise e crítica dos dados devem ser feitas para responder ao MEC/Conaes?

O que o MEC / Conaes pergunta?

Que dados devem ser coletados para suportar as respostas?

RelatórioRelatório

QuestionáriosQuestionários

Reuniões com Reuniões com grupos focaisgrupos focais

EntrevistasEntrevistas

Dados institucionaisDados institucionais

1 vez por ano (em várias partes) pela

internet

2/32/3

1 vez por semestre

pela internet

Será adotado o critério de amostragem:

2

2

2 **

e

qpZn

qpZNe

NqpZn

**1*

***22

2

… 1 população indefinida

… 2 população definida

Onde:

Z = abscissa da curva normal padrão fixado um nível de confiança;

p = estimativa da verdadeira proporção de um dos níveis da variável escolhida;

q = 1 – p;

N = tamanho da população;

e = erro amostral, que e a diferença admitida entre a verdadeira população e a proporção calculada a partir da amostra.

Z = 1,96 (nível de confiança de 95%)

p = 0,7 (70% dos alunos satisfeitos com a IES)

q = 1 – 0,7 = 0,3 (30% dos alunos insatisfeitos com a IES)

N = 1600 alunos na IES

e = 5% = 0,05

Portanto, utilizando a equação 2, tem-se:

2703.0*7,0*96,111600*05,0

1600*3,0*7,0*96,122

2

n alunos

Logo é preciso entrevistar uma amostra de 270 alunos270 alunos para representar o grau de satisfação dos 1600 alunos da instituiçãodos 1600 alunos da instituição, considerando um nível de confiança de 95%.nível de confiança de 95%.

Durante o período de coleta de dados diversas entrevistas serão

realizadas com objetivo de complementarcomplementar a coleta de dados.

Dirigentes

Coordenadores de Cursos

Professores

Representates de alunos

Também serão realizadas reuniões envolvendo

grupos específicosgrupos específicos para tratar de temas

específicos, de acordo com os comentárioscomentários

obtidos nos QuestionáriosQuestionários.

Os dados da PG Os dados da PG também serão coletados também serão coletados

de forma similar. de forma similar.

(e fluxograma)

representação dos processos nas instâncias representação dos processos nas instâncias acadêmicas como nas administrativas e acadêmicas como nas administrativas e ainda nos Órgãos Colegiados da IES. ainda nos Órgãos Colegiados da IES.

3 dias 20 dias

2 meses

arquivo Setor X

Inicio do processo

análise e decisão superior

?

s/ prazo def.

Será possível:Será possível:1) conscientizar, tanto o funcionário como o Setor envolvido, sobre sua responsabilidade;

2) identificar duplicação de documentos arquivados;

3) identificar a re-coleta de dados;

4) simplificar processos;

5) identificar a necessidade de informatização de processos; 6) identificar a necessidade de capacitação de pessoas ou realocação de pessoas;

7) melhorar a qualidade dos serviços devido a maior confiabilidade e unicidade de dados;

8) melhorar da gestão, devido ao acesso mais rápido a informação.

Os dados obtidos através de TODOS os instrumentos (questionários, do preenchimento das tabelas, entrevistas e reuniões com grupos

focais) serão a base para análise análise quantitativa e qualitativaquantitativa e qualitativa. Inicialmente os dados serão organizados numa base de dados relacional desenvolvida para este fim.

stastotalrespo

pesorespostasaomediaquest i

)*(

nquestao

aomediaquesttomediaquesi

No de respostasNo da QuestãoInfra-estrutura I II III IV V

Valor médio (equação 3)

1 7 5 20 38 5 3,42 5 10 42 8 10 3,13 45 0 17 10 3 2,04 15 20 10 15 15 2,9

Total de questionários: 75 alunosValor total do quesito (média- equação 4): 2,9

...4

...3

Pesos atribuídos para cada tipo Pesos atribuídos para cada tipo de resposta dos questionários de resposta dos questionários

Notas Índices1

2

3

4

5

Nunca/insuficiente (I)

Raramente/regular (II)

As vezes/médio (III)

Quase sempre/bom (IV)

Sempre/excelente (V)

Peso

Exemplo de análise gráfica obtida a partir de dados obtidos com o Sub-Sistema Análise Ensino. Avalia a evolução no número de cursos autorizados pelo MEC ao longo do tempo.

?

Exemplo (hipotético) de comentários obtidos nas perguntas dos Questionários. Sub-Sistema Análise Questionários.

A análise deverá ter por princípio a comparação com o PDI (Políticas Institucionais) da UNIMEP e a utilização da seguinte tabela: Critérios Descrição

Insuficiente não foi implantado ou não coincide com o PDI (Política correspondente).

Regular foi implantado mais diverge, de forma negativa, grandemente do PDI (Política correspondente).

Médio foi implantado recentemente, ainda sem resultados demonstrados.

Bom foi implantado a um certo tempo, podendo melhorar devido ao seu potencial.

Ótimo foi implantado, coincide fortemente com o PDI ou não era previsto no PDI (Política correspondente), mas apresenta excelentes resultados.

Complementarmente serão calculados índices específicos, tais como índice de formação, índice de retenção e índice de

evasão, usados para avaliar a evolução do alunado em cada curso de graduação e pós-

graduação oferecido pela UNIMEP.

100*ingressos

formandosformação

100*

ingressos

formandosciastransferênasdesistênciostrancamentingressosretenção

100*ingressos

iastranferêncasdesistênciostrancamentevasão

…6

…7

…8

Por exemplo, serão construídos gráficos de barra para avaliar a evolução do número de cursos oferecidos pela UNIMEP. Outros gráficos que serão construídos referem-se a proporção entre o número de alunos matriculados e a evasão por curso; o número de salas disponíveis por curso; o número de alunos por turma; o número de laboratórios por curso; etc., podendo variar o tipo tipo de gráfico (pizza, barras, linhasde gráfico (pizza, barras, linhas, etc.) escolhendo-se aquele que melhor visualize o parâmetro em estudo.

também será utilizada para complementar as discussões e conclusões.

Para que se possa adotar medidas corretivas na adotar medidas corretivas na InstituiçãoInstituição, estes dadosdados (na forma de gráficos) não poderão ser utilizados de forma isolada e sim de forma holísticaforma holística. Isto é, será necessário avaliar a influência relativa de parâmetros específicos neste sistema que tem gerado estas respostas.

Coincide com o PDI - 1 %

Conhecem, mas difere do PDI

9 %

Desconhecem 90 %

Exemplo de análise gráfica, gerada a partir de dados fictícios no Sub-Sistema Análise.

2% 7%

74%

17%

1

2

3

4

Titulação do Corpo Docente

Doutores

Mestres

Especialistas

Graduados

Exemplo de análise gráfica, gerada a partir de dados fictícios no Sub-Sistema Análise.

Sua opinião é muito importante!Sua opinião é muito importante!

Envie suas sugestões para:Envie suas sugestões para:

Texto completo do Projeto disponível Texto completo do Projeto disponível em: em: http:\\www.unimep.br\avaliacao

avalia@unimep.br