o percurso de 5 anos do subsistema para a garantia da ... · o percurso de 5 anos do subsistema...

O Percurso de 5 anos do Subsistema para a Garantia

da Qualidade das Unidades Curriculares (SubGQ_UC)

� Eduardo Ferreira da Silva, Gillian Moreira, José Alberto Rafael, Daniela Costa

WORKSHOP “5 ANOS DE SubGQ_UC” – 12 Novembro

WORKSHOP “5 ANOS DE SubGQ_UC”

0. Introdução

Objetivos da apresentação:

o apresentar o SubGQ_UC como parte de um todo que tem vindo a ser construído ao longo

dos últimos 5 anos;

o refletir sobre o funcionamento do SubGQ_UC e os ajustamentos realizados;

o contribuir para a compreensão do sistema e a participação ativa dos diversos atores na

melhoria nas formas e meios de divulgação dos resultados.


1. Arquitetura do Sistema de Informação Académico

O sistema da UA foi desenhado e implementado de modo a ser adaptável a mudanças na instituição e apermitir a existência de diferentes perfis de utilização, consoante a diversidade de competências dosrecursos humanos que interagem com o sistema, de modo que estes recursos o usem de acordo com assuas capacidades, impulsionando desta forma uma gestão eficaz e eficiente dos respetivos processos eprocedimentos. Sistema integrado - 100% Wireless – 100% digital – 100% disponível

Camada 3

Integração

funcional

Camada 2

Camada 1

Integração

de dados

Integração de uma componente visual


Pirâmide representativa dos vários níveis de avaliação.

2. Sistema Interno de Garantia da Qualidade

UA

Unidade

Orgânica

Curso

Unidade Curricular

SubGQ_UC

SIGQ_UA

SIGQ_UA – Sistema

Interno de Garantia da

Qualidade da UA


3. SubGQ_UC

o Objetivos

O SubGQ_UC tem por objetivo a melhoria contínua do funcionamento de cada unidade

curricular.

A análise do funcionamento de cada unidade curricular é feita a partir de duas fontes de

informação:

(a) por um lado, a auscultação dos atores intervenientes no processo de ensino aprendizagem

(perfis de utilização: estudante, comissão de curso, docente, docente responsável, direção,

comissão de análise, conselho pedagógico);

(b) por outro, a informação proveniente do sistema de informação académica.


4. Modelo do SubGQ-UC

Fase A - Diagnóstico

Estudante

Preenchimento de um

inquéritoonline sobre as

UC e corpo docente

associado

Representantes dos

estudantes nas

Comissões de Curso

PACO

Preenchimento dorelatório de discência

com a perceção sobre as UC

Informação Estatística

SITUAÇÃO RELEVANTE

Fase B – Proposta de Melhoria

Docente

Preenchimento de um relatório online por UC: relatório de docência– bloco corpo docente

Responsável

pela unidade curricular

Preenchimento dorelatório das

comissões de curso(contribuição para o plano de melhoria)

Preenchimento de um relatório online por UC: relatório de docência –

bloco responsável

Relatório de docência – bloco

responsável (versão final)

apreciação final do docente responsável

plano de melhoria revisitado

Diagnóstico + AutoavaliaçãoComp. estatística + Comp. não estatística


4. Modelo do SubGQ-UC

Direcção da UO/Escola

Preenchimento do relatório global:

� sumário executivo que

caracterize o funcionamento de

todas as unidades curriculares;

� análise e consolidação dos planos

de melhoria:

(a) análise das situações desviantes;

análise das boas práticas;

(b) agregação/grau de prioridade

dos recursos para implementação

dos (c) planos de melhoria.

Comissão de Análise

�aprovação do

relatório global;

�definição do grau

de

comprometimento

do

Departamento/Escol

a face à execução dos

planos de melhoria.

Conselho

Pedagógico

Supervisão

Mediação

Análise e divulgação de resultados

Fase C – Garantia Fase D – Supervisão

Diagnóstico + PM = Ações a implementar


� Sistema de melhoria da qualidade

� Do ponto de vista conceptual:

componente instrumental

apoio no processo de decisão

� Conjunto de informação que permite uma decisão

� Houve um percurso que resultou de observações e das diferentes propostas enviadas pelas diferentes

interlocutores

Melhorar o instrumento

4. Modelo do SubGQ-UC - Sintese


5. Revisões/ajustes do instrumento

� Inquérito pedagógico (introdução da possibilidade de não resposta: “se considera que não tem condições

para responder a este inquérito clique aqui)” – por unidade curricular.

� Alteração da designação de Situação Extraordinária Negativa para Situação Relevante – PMO.

� Alteração dos Critérios de Classificação:

o ajustes nos intervalos de valores a considerar no CC1, CC2 e CC3;

o introdução da regra dos 85% e dos “dois anos consecutivos” no CC4;

o cálculo dos CC4 e CC5 tendo em conta o percentil (10 e 90);

o alteração na taxa de aprovação que estava a ser utilizada pelo sistema (aprovados/avaliados vs

aprovados/inscritos).

� Alteração na organização do relatório do Relatório de Discência de forma a torna-lo mais claro (pontos

fortes vs boas práticas; boas práticas definidas por critérios estatísticos).

� Alterações substanciais no sistema relativas às ações a desenvolver na Fase C, nomeadamente algumas

questões foram “fechadas” de forma a facilitar a resposta (ajuda à decisão).

� Foram produzidos no sistema os dados que alimentam os relatórios semestrais do Conselho Pedagógico.

critérios de

classificação1º sem 09/10

a partir de 2º

sem 09/10

CC1 ≤ 3.5 ≤ 4.5

CC2 ≤ 2.5 ≤ 3.5

CC3 ≤ 2 ≤ 3

CC4 percentagem Percentil

CC5 percentagem Percentil

CC6 ≥ 8 ≥ 8


6. Informação disponível no sistema

� Estatísticas de respostas ao inquérito pedagógico por curso.



� Estatísticas de respostas ao inquérito pedagógico por curso.

Informação disponível no sistema que

agrega os resultados por curso:

% de respostas de estudantes por curso

Nº de respondentes


� Relatório sobre uma UC e estudantes de um curso (respostas no IP dos estudantes de um curso a uma UC)



� Relatório de discência para uma Unidade Curricular (cursos onde a UC é lecionada e situação reportada)


Resposta dos estudantes de cada

curso sobre uma determinada UC

(fornecido em formato pdf);

No relatório de discência é possível

visualizar o conteúdo dos relatórios de

todos os cursos sobre uma UC.


7. Classificação das UCs

ano letivo (semestre) UC mont UC eleg PMO %PMO PMO_IP %PMO_IP PMO_RDis %PMO_RDis PM %PM CC1 CC2 CC3 CC4 CC5 CC6

09-10 (1º s) 916 720 195 21% 97 50% 120 62% 73 8% 1 1 0 88 8 9

09-10 (2º s) 871 723 180 21% 117 65% 83 46% 25 3% 27 14 10 91 3 27

10-11 (1º s) 960 822 164 17% 101 62% 71 43% 65 7% 25 14 10 76 5 33

10-11 (2º s) 899 780 107 12% 72 67% 37 35% 41 5% 18 11 8 52 3 24

11-12 (1º s) 992 842 96 10% 65 68% 41 43% 33 3% 23 14 11 45 1 30

11-12 (2º s) 894 783 108 12% 70 65% 45 42% 26 3% 15 9 5 50 7 34

12-13 (1º s) 990 850 105 11% 67 64% 44 42% 24 2% 11 4 1 58 1 41

12-13 (2º s) 897 772 96 11% 70 73% 33 34% 20 2% 17 9 7 58 1 44

13-14 (1º s) 971 829 100 10% 71 71% 37 37% 20 2% 16 8 7 54 1 40

13-14 (2º s) 899 760 98 11% 64 65% 43 44% 13 1% 18 12 8 44 5 33

0

5

10

15

20

25

30

35

40

45

50

09-10

(1º s)

09-10

(2º s)

10-11

(1º s)

10-11

(2º s)

11-12

(1º s)

11-12

(2º s)

12-13

(1º s)

12-13

(2º s)

13-14

(1º s)

13-14

(2º s)

CC6o PMO resultantes de critérios estatísticos ou do

relatório de discência (pode haver sobreposições)

o Taxa de PMOs preenchidos: 90-100%

o % de PMOs reduziu para metade (fase de

melhoria)

o Apresentação de PM voluntários pelos docentes

o Identificação de boas práticas (CC6) que devem ser

divulgadas – 3 a 4%

o Se uma UC é lecionada a vários cursos e foi

classificada com PMO; todas as CC são chamadas a

responder ao relatório das CC independentemente

do curso que tenha originado o PMO


8. Participação nas várias edições do SubGQ_UC

� Participação dos Estudantes no Inquérito Pedagógico

o Grande participação dos estudantes

o Resposta em consciência – quando entende que

não está em condições de responder o estudante

pode optar por não responder

o Respostas (65%) permite realizar um bom

diagnóstico e ter consequência no processo de

melhoria do processo de ensino/aprendizagem

o 8000 estudantes em 15000 respondem ao

inquérito

0% 20% 40% 60% 80% 100%

13-14 (2º s)

13-14 (1º s)

12-13 (2º s)

12-13 (1º s)

11-12 (2º s)

11-12 (1º s)

10-11 (2º s)

10-11 (1º s)

09-10 (2º s)

09-10 (1º s)

%respondentes ao IP

%respondentes efetivos ao IP

%respondentes antes da 3ª

semana


BD: Relatório de Docência - Bloco Corpo Docente; BR: Relatório de Docência - Bloco Responsável


� Participação dos Docentes

75% 80% 85% 90% 95% 100%

13-14 (2º s)

13-14 (1º s)

12-13 (2º s)

12-13 (1º s)

11-12 (2º s)

11-12 (1º s)

10-11 (2º s)

10-11 (1º s)

09-10 (2º s)

09-10 (1º s)

% BD preenchidos

% BR preenchidos

o Taxa de participação elevada

o Excelentes contributos permitindo à

Comissão de Análise ter elementos

para a tomada de decisão

o Docentes demonstram estarem

comprometidos com o processo de

melhoria


CC: Relatório das Comissões de Curso para uma Unidade Curricular

� Participação das Comissões de Curso.


0% 20% 40% 60% 80% 100%

13-14 (2º s)

13-14 (1º s)

12-13 (2º s)

12-13 (1º s)

11-12 (2º s)

11-12 (1º s)

10-11 (2º s)

10-11 (1º s)

09-10 (2º s)

09-10 (1º s)

% CC preenchidos

o Percentagem elevada de participação no

preenchimento dos relatórios reveladora

de uma participação ativa e empenhada

o Participação decisiva para o processo de

melhoria


Aprovados /Avaliados: 80% │ Aprovados / Inscritos: 70%

9. Sucesso Escolar – Universidade de Aveiro

0% 10% 20% 30% 40% 50% 60% 70% 80% 90%

13-14 (2º s)

13-14 (1º s)

12-13 (2º s)

12-13 (1º s)

11-12 (2º s)

11-12 (1º s)

10-11 (2º s)

10-11 (1º s)

09-10 (2º s)

09-10 (1º s)

tx aprov/aval

tx aprov/insc

o Aprovados/Inscritos: mantem-se


P1: Motivação para a unidade curricular; P2: Grau de satisfação global com a sua prestação; P3: Número de

vezes que recorreu ao(s) docente(s) fora das horas de contacto/sessões presenciais durante o semestre; P4:

Regularidade no acompanhamento do trabalho da unidade curricular ao longo do semestre; P5: Grau de

assiduidade na assistência às OT (ter como referência o número de OT fixada no horário); TTG1: Totais do

Grupo 1 (Autoavaliação dos estudantes)

� P1-P5

10. Autoavaliação dos Estudantes

0,00

1,00

2,00

3,00

4,00

5,00

6,00

7,00

09-10

(1º S )

09-10

(2º S )

10-11

(1º S )

10-11

(2º S )

11-12

(1º S )

11-12

(2º S )

12-13

(1º S )

12-13

(2º S )

13-14

(1º S )

13-14

(2º S )

P1 P2 P3 P4 P5 TTG1

o Tendência ascendente

ligeira

o Avaliar a eficiência

o Refletir sobre outras

formas de utilizar o

tempo


10. Caracterização das Unidades Curriculares

ano letivo

(semestre)P12

09-10 (1º s) 6,18

09-10 (2º s) 6,30

10-11 (1º s) 6,25

10-11 (2º s) 6,39

11-12 (1º s) 6,39

11-12 (2º s) 6,40

12-13 (1º s) 6,43

12-13 (2º s) 6,46

13-14 (1º s) 6,47

13-14 (2º s) 6,48

� P12 - Funcionamento global da Unidade Curricular


10. Caracterização dos Docentes

ano letivo

(semestre)P29

09-10 (1º s) 6,35

09-10 (2º s) 6,46

10-11 (1º s) 6,42

10-11 (2º s) 6,51

11-12 (1º s) 6,53

11-12 (2º s) 6,52

12-13 (1º s) 6,56

12-13 (2º s) 6,62

13-14 (1º s) 6,62

13-14 (2º s) 6,67

� P29 - Avaliação global do desempenho do docente


11. ECTS

0

1

2

3

4

5

6

7

8

9

09

-10

(1

º s)

10

-11

(1

º s)

11

-12

(1

º s)

12

-13

(1

º s)

13

-14

(1

º s)

09

-10

(1

º s)

10

-11

(1

º s)

11

-12

(1

º s)

12

-13

(1

º s)

13

-14

(1

º s)

09

-10

(1

º s)

10

-11

(1

º s)

11

-12

(1

º s)

12

-13

(1

º s)

13

-14

(1

º s)

09

-10

(1

º s)

10

-11

(1

º s)

11

-12

(1

º s)

12

-13

(1

º s)

13

-14

(1

º s)

UO1 UO2 UO3 UO4

Soma de médiaECTS

Soma de

médiaECTS_estimados


12. Relação entre as taxas de aprovação e as respostas ao IP

P12 1º Sem 09-10 1º Sem 10-11 1º Sem 11-12 1º Sem 12-13 1º Sem 13-14 2º Sem 09-10 2º Sem 10-11 2º Sem 11-12 2º Sem 12-13 2º Sem 13-14

UO1 6,76 7,08 7,09 6,83 6,97 6,95 7,06 7,08 6,88 6,75

UO2 6,01 5,97 6,11 6,34 6,43 6,14 6,32 6,14 6,58 6,56

P29 1º Sem 09-10 1º Sem 10-11 1º Sem 11-12 1º Sem 12-13 1º Sem 13-14 2º Sem 09-10 2º Sem 10-11 2º Sem 11-12 2º Sem 12-13 2º Sem 13-14

UO1 7,18 7,09 7,31 7,20 7,26 7,11 6,99 7,43 7,23 7,09

UO2 6,53 6,38 6,59 6,48 6,95 6,90 6,83 6,79 6,90 7,08

aprov/

insc 1º Sem 09-10 2º Sem 09-10 1º Sem 10-11 2º Sem 10-11 1º Sem 11-12 2º Sem 11-12 1º Sem 12-13 2º Sem 12-13 1º Sem 13-14 2º Sem 13-14

UO1 86% 87% 82% 91% 92% 89% 89% 91% 93% 92%

UO2 41% 38% 39% 40% 42% 36% 44% 42% 46% 40%

aprov/

aval 1º Sem 09-10 2º Sem 09-10 1º Sem 10-11 2º Sem 10-11 1º Sem 11-12 2º Sem 11-12 1º Sem 12-13 2º Sem 12-13 1º Sem 13-14 2º Sem 13-14

UO1 92% 93% 90% 96% 96% 97% 98% 98% 98% 98%

UO2 54% 57% 56% 61% 55% 55% 59% 59% 60% 60%

� Foram selecionadas duas UO que representam os extremos em termos de taxas de aprovação

Em ambas as UO os estudantes pontuam melhor o corpo docente do que as UC (independente da taxa de

aprovação registada); na UO2 a diferença chega a ser de mais de meio ponto;

Comportamento elucidativo da consciência que os diferentes participantes colocam na resposta

o percurso de 5 anos do subsistema para a garantia da ... · o percurso de 5 anos do subsistema...

Documents