apresentação do powerpoint -...

Apresentao

dos

Resultados Nacionais

Sintra, 6 dezembro 2016

Joo Marco, Ph. D.

[email protected]

Programme for International Student Assessment

PISA 2015 PORTUGAL

459

501

470

498

454

492

400

420

440

460

480

500

520

540

2000 2003 2006 2009 2012 2015

Po

ntu

a

o n

a E

scala

PIS

A

Ano

Cincias Leitura Matemtica

1000

0

OCDE

PortugalPORTUGAL

3

Programme for International Student Assessment avalia se os alunos de 15 anos, em todas as modalidades de educao e formao, conseguem

mobilizar os seus conhecimentos e competncias de leitura, matemtica ou cincias na resoluo

de situaes relacionadas com o dia a dia das sociedades contemporneas.

O que o PISA?

PORTUGAL

Domnios de Avaliao (OCDE, 2016):

LITERACIA CIENTFICA

.

LITERACIA LEITURA

.

LITERACIA MATEMTICA

.

Formular Aplicar Interpretar Localizar Interpretar Avaliar Explicar Avaliar Interpretar

4

Programme for International Student Assessment avalia se os alunos de 15 anos, em todas as modalidades de educao e formao, conseguem

mobilizar os seus conhecimentos e competncias de leitura, matemtica ou cincias na resoluo

de situaes relacionadas com o dia a dia das sociedades contemporneas.

O que o PISA?

PORTUGAL

Domnios de Avaliao (OCDE, 2016):

5

RESOLUO COLABORATIVA

DE PROBLEMAS

Novo em 2015:

O teste PISA 2015

PORTUGAL

6

Formato tradicional do PISA:

Papel-e-Lpis

Exemplo de item de

Cincias

O teste PISA 2015

PORTUGAL


Papel-e-Lpis

Exemplo de item de

Cincias

7

O teste PISA 2015

PORTUGAL


Papel-e-Lpis

Exemplo de item de

Matemtica

8

O teste PISA 2015

PORTUGAL

NOVO FORMATO:

Computer Based Assessment

(Avaliao em Computador)

9

O teste PISA 2015

PORTUGAL

CBA

Exemplo

de item de

Cincias

10

O teste PISA 2015

PORTUGAL

CBA

Exemplo

de item de

Cincias

11

O teste PISA 2015

PORTUGAL

CBA

Exemplo

de item de

Cincias

12

O teste PISA 2015

PORTUGAL

Invarincia de modo PBA vs. CBA?O teste em computador (CBA) mantm as mesmas qualidades psicomtricas do teste em Papel-e-lpis (PBA)?

Os itens tm o mesmo ndice de dificuldade e discriminao?

Os construtos (dimenses de literacia) so os mesmos?

A validade e a fiabilidade dos resultados no se altera?

Estudo Piloto

INVARINCIA DE MODO (2014):Trend

PBA

(23%)

CBA

(35%)CBA

(42 %)

New & CPS

AMOSTRA: 53 Pases

n 2000/pas

25-30 escolas/pas

ni 70 alunos/escola

2 salas em simultneo (PBA+CBA)

1 sala ou outro perodo do dia.

13

O teste PISA 2015

PORTUGAL

Invarincia de modo PBA vs. CBA?

RESULTADOS:

DomnioMdias Internacionais (P+)

CBA PBA CBAPBA

Matemtica 0,45 0,47 -0,02

Leitura 0,60 0,59 +0,01

Cincias 0,49 0,50 -0,01

ndice de Dificuldade (TCT)(Proporo respostas corretas)

300

350

400

450

500

550

600

650

300 350 400 450 500 550 600 650

PB

A

CBA

0

0

1000

1000

////

1 : 1Correlao entre as pontuaes mdias

obtidas em cincias, matemtica e leitura

em modo CBA e em modo PBA:

MATEMTICA (r = 0,97; b = 1,05)

CINCIAS (r = 0,97; b = 1,06)

LEITURA (r = 0,96; b = 0,98)

14

O teste PISA 2015

PORTUGAL

Conjunto de itens de seleo (simples, mltipla, complexa) e itens de construo

Recorre a suportes variados (textos, mapas, grficos e figuras e simulaes em computador)

3 domnios clssicos + 1 domnio novo (Resoluo Colaborativa de Problemas - CPS)

33%

33% 22%

4%4%

4%

Tempo total de testagem 4 domnios: 13h 30min.

Durao do Teste: 2 h

( + 30 min. questionrio ao aluno)

Domnio principal (Cincias) - avaliado em

todos os alunos - 1 h de teste

Domnios secundrios Distribudos em

diferentes propores - 2. hora do teste

66 verses de teste

15

Organizao para a Cooperao e Desenvolvimento Econmica (OCDE)

Organizao composta por 35 estados membros com a misso de promover

polticas que melhorem o bem estar econmico e social dos cidados de

todo o mundo. Promove o PISA desde 2000.

Quem responsvel pelo PISA?

www.iave.pt

Instituto de Avaliao Educativa, I. P.

Instituto Pblico responsvel pela elaborao de instrumentos de

avaliao externa de alunos no ensino bsico e secundrio e pela

coordenao e aplicao dos estudos internacionais de avaliao de

alunos (TIMSS, PISA, PIRLS, ICILS,.)

Consrcio PISA 2015

Organizaes pblicas e privadas responsveis pelas diferentes

tarefas/mdulos do PISA 2015:

- ETS: Framework e itens; Student Delivery System; Estimao scores PISA

- Pearson: Framework e criao de itens

- Westat: Amostragem e estimao pesos amostragem

- DIPF: Questionrios de Contexto e criao de escalas psicomtricas

PORTUGAL

16

Porqu participar no PISA?

Andreas Schleicher, OECD

A participao nacional permite avaliar a literacia cientfica, literacia de leitura e literacia matemtica domnios fundamentais cidadania nas sociedades contemporneas, em jovens prximo do final da escolaridade obrigatria.

O que conseguem fazer, com o que aprendem na escola, os nossos jovens de 15 anos?

O que importante para um cidado saber e conseguir fazer para o exerccio pleno da cidadania nas sociedades modernas?

Literacia (capacidade de mobilizar conhecimentos e competncias) e no simplesconhecimento de contedos curriculares

Referencial internacional estabelecido por peritos em educao de todo o mundo

Informao sobre as variveis de contexto socioeconmico e cultural que influenciam o ensino e a aprendizagem

Orientaes para medidas de poltica educacional e programas de apoio curricular

PORTUGAL

17

Quem participou no PISA 2015?

72 pases e economias17 565 escolas

509 000 alunos

143 000 enc. de educao

95 000 professoresPASES MEMBROS DA OCDE: PASES E ECONOMIAS NO MEMBROS DA OCDE:

Austrlia, ustria, Blgica, Canad, Chile,

Repblica Checa, Dinamarca, Estnia,

Finlndia, Frana, Alemanha, Grcia,

Hungria, Islndia, Irlanda, Israel, Itlia,

Japo, Letnia, Luxemburgo, Mxico,

Holanda, Nova Zelndia, Noruega,

Polnia, Portugal, Repblica Eslovaca,

Eslovnia, Repblica da Coreia, Espanha,

Sucia, Sua, Turquia, Reino Unido,

Estados Unidos da Amrica.

Albnia, Arglia, Argentina, Brasil, Bulgria, as

provinciais de Beijing-Shangai-Jiangsu-Guandong da

China [reportadas como B-S-J-G (China)], Hong Kong

(China), Macau (China), Colmbia, Costa Rica, Crocia,

Chipre, Repblica Dominicana, Gergia, Indonsia,

Jordnia, Cazaquisto, Kosovo, Lbano, Litunia, Antiga

Repblica Jugoslava da Macednia, Malsia, Malta,

Moldvia, Montenegro, Peru, Catar, Romnia,

Federao Russa, Singapura, Taip Chins, Tailndia,

Trindade e Tobago, Tunsia, Emirados rabes Unidos,

Uruguai. Vietname.

(pases em itlico PBA)

PORTUGAL

18

Resultados Internacionais

LITERACIA CIENTFICA

PORTUGAL

SNG (556)

JPN (538)

EST (534)

TPE (532)

FIN (531)

TUN (386)

MKD (384)

KSV (378)

DZA (376)

DOM (332)

DNK (502)

POL (501)

PRT (501)17.

NOR (498)

EUA (496)

AUT (495)

FRA (495)

SWE (493)

ESP (493)

19


LITERACIA DE LEITURA

PORTUGAL

SNG (535)

HKG(527)

CAN (527)

FIN (526)

IRL (521)

FRA (499)

BEL (499)

PRT (498) 18.

GBR (498)

TPE (497)

EUA (497)

ESP (496)

RUS (495)

B-S-J-G (494)

MKD (352)

DZA (350)

KSV (347)

LBN (347)

20


LITERACIA MATEMTICA

PORTUGAL

SNG (564)

HKG(548)

MAC (544)

TPE (542)

JPN (532)

FRA (493)GBR (492)CZE (492)PRT (492)22.ITA (490)

TUN (367)

KSV (362)

DZA (360)

DOM (328)

21


Tendncias 2006/2012-2015

22

Cincias Leitura Matemtica


PISA 2015 AMOSTRAEscolas/alunos selecionadas por amostragem aleatria multietapa:

1. Etapa: aleatria estratificada (NUTS III e Natureza Administrativa)

2. Etapa: aleatria simples (alunos com idades entre 15 anos e 3 meses e 16 anos e 2 meses a frequentar

pelo menos o 7. ano ou equivalente em todas as modalidades de educao e formao)

PORTUGAL

246 (222 pblicas + 24 particulares e cooperativas)(Taxa Amostragem: 24%)

4228 (M = 46,7 anos; 72% )

7325 (M = 15,8 anos; 50% )

(Taxa Amostragem: 7,5%)

R. A. Aores: 21% (sobreamostragem)

A. M. Lisboa: 18%

A. M. Porto: 13%

Outras NUTS III: 1 - 4,5 %

6881 Encarregados de educao

23


LITERACIA CIENTFICA

Evoluo 2000-2015

PORTUGAL459

468

474

493

489

501

410

430

450

470

490

510

530

2000 2003 2006 2009 2012 2015

Po

nto

s na e

scala

das

Ci

nci

as

+ 27

OCDE

1000

0

Portugal

Evoluo

2000-2015Taxa Mdia

Portugal: +2,8 pontos/ano*

OCDE: -0,2 pontos/anons

24


LITERACIA CIENTFICA

CONTEDOS & COMPETNCIAS

PORTUGAL

25

498

502503

493

493493

485

495

505

Explicar

fenmenos

Avaliar e

conceber

investigaes

Interpretar dados

e evidncias

499

503500

493

492494

480

490

500

510

Sistemas

Fsicos

Sistemas

Vivos

Terra e

Espao

Portugal OCDE


LITERACIA CIENTFICA

Evoluo 2006-2015 por ano de escolaridade

PORTUGAL

26

376

413

451

549

588

445

351

399

451

528

556

355

300

350

400

450

500

550

600

0 1 2 3 4 5 6 7

Po

ntu

a

o n

a e

scala

das

Ci

nci

as

em

2006 e

2015

Escolaridade

7. 8. 9. 10. 11. Voc/Prof

2015

2006

60%

30%

10%

5%


LITERACIA CIENTFICA

Evoluo por ano de escolaridade 2000 - 2015

PORTUGAL

7. Ano: y = 2,7895x + 340,00

8. Ano: y = 2,7226x + 378,71

9. Ano: y = 2,59x + 429,06

10.Ano: y = 2,6033x + 506,75

Mdia: y = 2,7932x + 459,76

300

350

400

450

500

550

0 3 6 9 12 15

Po

ntu

a

o n

a e

scala

das

Ci

nci

as

2000 2003 2006 2009 2012 2015

27


LITERACIA CIENTFICA

Evoluo Low Achievers : Top Performers 2000 - 2015

PORTUGAL

28

24,5%

16,5%

19,0%

17,4%

3,1%

4,2%

4,5%

7,4%

2006

2009

2012

2015

Abaixo do Nvel 2 Nvel 5 ou Acima

Low Achievers (< 410 pontos; abaixo do nvel 2): Conhecimentos elementares e competncias bsicas na utilizao de contedos e procedimentos

Top Performers ( 633 pontos; nvel 5 ou 6):Conhecimentos epistemolgicos e competncias avanadas na utilizao de contedos e procedimentos


LITERACIA CIENTFICA

Resultados regionais

PORTUGAL

NUTS III

Alentejo Litoral 536 (8,1)

Lezria do Tejo 522 (6,4)

Douro 522 (40,0)

Beira Baixa 519 (6,6)

Regio de Leiria 519 (8,2)

Alto Minho 517 (15,3)

Viseu Do Lafes 515 (6,6)

Regio de Coimbra 512 (12,1)

rea Metropolitana de Lisboa 508 (5,3)

Mdio Tejo 508 (9,8)

rea Metropolitana do Porto 506 (5,1)

Beiras e Serra da Estrela 504 (9,0)

Oeste 501 (21,1)

Alto Alentejo 501 (8,9)

Portugal 501 (2,4)

Alentejo Central 498 (16,0)

Regio de Aveiro 498 (14,6)

Ave 489 (14,6)

Cvado 487 (6,4)

Regio Autnoma da Madeira 487 (14,6)

Algarve 485 (11,2)

Baixo Alentejo 470 (21,0)

Regio Autnoma dos Aores 470 (2,3)

Terras de Trs-os-Montes 465 (6,8)

Alto Tmega 461 (40,3)

Tmega e Sousa 460 (11,0)

Mdia (S.E. )

29


LITERACIA CIENTFICA


PORTUGAL

NUTS III



Douro 522 (40,0)







Mdio Tejo 508 (9,8)



Oeste 501 (21,1)


Portugal 501 (2,4)



Ave 489 (14,6)

Cvado 487 (6,4)


Algarve 485 (11,2)






Mdia (S.E. )

30



Evoluo 2000 - 2015

PORTUGAL

Evoluo

2000-2015Taxa Mdia


OCDE: 0,1 pontos/ano ns470

478

472

489 488

498

430

450

470

490

510

530

2000 2003 2006 2009 2012 2015

Po

nto

s na e

scala

da L

eitura

+ 10 n.s.

Portugal

OCDE

1000

0

31




PORTUGAL

7. Ano: y = 3,3425x + 322,19

8. Ano: y = 2,6333x + 373,71

9. Ano: y = 1,8184x + 435,32

10.Ano: y = 1,1077x + 524,41

Mdia: y = 1,7793x + 469,18

300

350

400

450

500

550

0 3 6 9 12 15

Po

ntu

a

o n

a e

scala

da L

eitura

2000 2003 2006 2009 2012 2015

32




PORTUGAL

NUTS III




Douro 512 (38,5)


Mdio Tejo 511 (10,6)





Oeste 502 (24,4)





Portugal 498 (2,7)

Ave 495 (12,5)


Algarve 490 (9,9)

Cvado 488 (10,6)







Mdia (S.E. )

33




PORTUGAL

NUTS III




Douro 512 (38,5)







Oeste 502 (24,4)





Portugal 498 (2,7)

Ave 495 (12,5)


Algarve 490 (9,9)

Cvado 488 (10,6)







Mdia (S.E. )

34


LITERACIA MATEMTICA

Evoluo 2000-2015

PORTUGAL

Evoluo

2000-2015Taxa Mdia


OCDE: -0,3 pontos/anons454

466

466

487

487

492

410

430

450

470

490

510

530

2000 2003 2006 2009 2012 2015

Po

nto

s na e

scala

da M

ate

mtica

+ 5 n.s.

Portugal

OCDE

1000

0

35


LITERACIA MATEMTICA


PORTUGAL

7. Ano: y = 2,6773x + 329,25

8. Ano: y = 1,7779x + 374,12

9. Ano: y = 1,7754x + 427,5

10. Ano: y = 2,6622x + 503,55

Mdia: y = 2,6207x + 455,66

300

350

400

450

500

550

0 3 6 9 12 15

Po

ntu

a

o n

a e

scala

da M

ate

mtica

2000 2003 2006 2009 2012 2015

36


LITERACIA DE MATEMTICA


PORTUGAL

NUTS III






Douro 509 (39,1)








Portugal 492 (2,5)



Oeste 488 (20,9)

Cvado 486 (7,6)

Ave 484 (14,9)


Algarve 471 (12,1)






Mdia (S.E. )

37


LITERACIA MATEMTICA


PORTUGAL

NUTS III






Douro 509 (39,1)








Portugal 492 (2,5)



Oeste 488 (20,9)

Cvado 486 (7,6)

Ave 484 (14,9)


Algarve 471 (12,1)






Mdia (S.E. )

38

Programme for International Student Assessment

PISA 2015 PORTUGAL Apresentao dos


[email protected]

Obrigado pela ateno!

apresentação do powerpoint -...

Documents