Apresentação do PowerPointn2.iave.pt/images/FicheirosPDF/Estudos_Internacionais/A... · 2018. 6. 27. · Sintra, 6 dezembro 2016 João Marôco, Ph. D. [email protected] ... POL

Apresentação

dos

Resultados Nacionais

Sintra, 6 dezembro 2016

João Marôco, Ph. D.

[email protected]

Programme for International Student Assessment

PISA 2015 − PORTUGAL

459

501

470

498

454

492

400

420

440

460

480

500

520

540

2000 2003 2006 2009 2012 2015

Po

ntu

açã

o n

a E

scala

PIS

A

Ano

Ciências Leitura Matemática

1000

0

OCDE

PortugalPORTUGAL

3

Programme for International Student Assessment …… avalia se os alunos de 15 anos, em todas as modalidades de educação e formação, conseguem

mobilizar os seus conhecimentos e competências de leitura, matemática ou ciências na resolução

de situações relacionadas com o dia a dia das sociedades contemporâneas.

O que é o PISA?

PORTUGAL

Domínios de Avaliação (OCDE, 2016):

LITERACIA CIENTÍFICA

«

».

LITERACIA LEITURA

«

».

LITERACIA MATEMÁTICA

«

».

Formular Aplicar Interpretar Localizar Interpretar Avaliar Explicar Avaliar Interpretar

4

Programme for International Student Assessment …… avalia se os alunos de 15 anos, em todas as modalidades de educação e formação, conseguem

mobilizar os seus conhecimentos e competências de leitura, matemática ou ciências na resolução

de situações relacionadas com o dia a dia das sociedades contemporâneas.

O que é o PISA?

PORTUGAL

Domínios de Avaliação (OCDE, 2016):

5

RESOLUÇÃO COLABORATIVA

DE PROBLEMAS

«

Novo em 2015:

O teste PISA 2015

PORTUGAL

6

Formato tradicional do PISA:

Papel-e-Lápis

Exemplo de item de

Ciências

O teste PISA 2015

PORTUGAL


Papel-e-Lápis

Exemplo de item de

Ciências

7

O teste PISA 2015

PORTUGAL


Papel-e-Lápis

Exemplo de item de

Matemática

8

O teste PISA 2015

PORTUGAL

NOVO FORMATO:

Computer Based Assessment

(Avaliação em Computador)

9

O teste PISA 2015

PORTUGAL

CBA

Exemplo

de item de

Ciências

10

O teste PISA 2015

PORTUGAL

CBA

Exemplo

de item de

Ciências

11

O teste PISA 2015

PORTUGAL

CBA

Exemplo

de item de

Ciências

12

O teste PISA 2015

PORTUGAL

Invariância de modo PBA vs. CBA?O teste em computador (CBA) mantém as mesmas qualidades psicométricas do teste em Papel-e-lápis (PBA)?

• Os itens têm o mesmo índice de dificuldade e discriminação?

• Os construtos (dimensões de literacia) são os mesmos?

• A validade e a fiabilidade dos resultados não se altera?

Estudo Piloto

INVARIÂNCIA DE MODO (2014):Trend

PBA

(23%)

CBA

(35%)CBA

(42 %)

New & CPS

AMOSTRA: 53 Países

n 2000/país

25-30 escolas/país

ni 70 alunos/escola

2 salas em simultâneo (PBA+CBA)

1 sala ou outro período do dia.

13

O teste PISA 2015

PORTUGAL

Invariância de modo PBA vs. CBA?

RESULTADOS:

DomínioMédias Internacionais (P+)

CBA PBA CBA−PBA

Matemática 0,45 0,47 -0,02

Leitura 0,60 0,59 +0,01

Ciências 0,49 0,50 -0,01

Índice de Dificuldade (TCT)(Proporção respostas corretas)

300

350

400

450

500

550

600

650

300 350 400 450 500 550 600 650

PB

A

CBA

0

0

1000

1000

////

1 : 1Correlação entre as pontuações médias

obtidas em ciências, matemática e leitura

em modo CBA e em modo PBA:

MATEMÁTICA (r = 0,97; b = 1,05)

CIÊNCIAS (r = 0,97; b = 1,06)

LEITURA (r = 0,96; b = 0,98)

14

O teste PISA 2015

PORTUGAL

• Conjunto de itens de seleção (simples, múltipla, complexa) e itens de construção …

• Recorre a suportes variados (textos, mapas, gráficos e figuras e simulações em computador)

3 domínios clássicos + 1 domínio novo (Resolução Colaborativa de Problemas - CPS)

33%

33% 22%

4%4%

4%

Tempo total de testagem 4 domínios: 13h 30min.

Duração do Teste: 2 h

( + 30 min. questionário ao aluno)

•Domínio principal (Ciências) - avaliado em

todos os alunos - 1 h de teste

•Domínios secundários – Distribuídos em

diferentes proporções - 2.ª hora do teste

• 66 versões de teste

15

Organização para a Cooperação e Desenvolvimento Económica (OCDE)

Organização composta por 35 estados membros com a missão de promover

políticas que melhorem o bem estar económico e social dos cidadãos de

todo o mundo. Promove o PISA desde 2000.

Quem é responsável pelo PISA?

www.iave.pt

Instituto de Avaliação Educativa, I. P.

Instituto Público responsável pela elaboração de instrumentos de

avaliação externa de alunos no ensino básico e secundário e pela

coordenação e aplicação dos estudos internacionais de avaliação de

alunos (TIMSS, PISA, PIRLS, ICILS,….)

Consórcio PISA 2015

Organizações públicas e privadas responsáveis pelas diferentes

tarefas/módulos do PISA 2015:

- ETS: Framework e itens; Student Delivery System; Estimação scores PISA

- Pearson: Framework e criação de itens

- Westat: Amostragem e estimação pesos amostragem

- DIPF: Questionários de Contexto e criação de escalas psicométricas

PORTUGAL

16

Porquê participar no PISA?

Andreas Schleicher, OECD

A participação nacional permite avaliar a literacia científica, literacia de leitura e literacia matemática – domínios fundamentais à cidadania nas sociedades contemporâneas, em jovens próximo do final da escolaridade obrigatória.

• O que conseguem fazer, com o que aprendem na escola, os nossos jovens de 15 anos?

• O que é importante para um cidadão «saber» e «conseguir fazer» para o exercício pleno da cidadania nas sociedades modernas?

• Literacia (capacidade de mobilizar conhecimentos e competências) e não simplesconhecimento de conteúdos curriculares

• Referencial internacional estabelecido por peritos em educação de todo o mundo

• Informação sobre as variáveis de contexto socioeconómico e cultural que influenciam o ensino e a aprendizagem

• Orientações para medidas de política educacional e programas de apoio curricular

PORTUGAL

17

Quem participou no PISA 2015?

72 países e economias17 565 escolas

509 000 alunos

143 000 enc. de educação

95 000 professoresPAÍSES MEMBROS DA OCDE: PAÍSES E ECONOMIAS NÃO MEMBROS DA OCDE:

Austrália, Áustria, Bélgica, Canadá, Chile,

República Checa, Dinamarca, Estónia,

Finlândia, França, Alemanha, Grécia,

Hungria, Islândia, Irlanda, Israel, Itália,

Japão, Letónia, Luxemburgo, México,

Holanda, Nova Zelândia, Noruega,

Polónia, Portugal, República Eslovaca,

Eslovénia, República da Coreia, Espanha,

Suécia, Suíça, Turquia, Reino Unido,

Estados Unidos da América.

Albânia, Argélia, Argentina, Brasil, Bulgária, as

provinciais de Beijing-Shangai-Jiangsu-Guandong da

China [reportadas como B-S-J-G (China)], Hong Kong

(China), Macau (China), Colômbia, Costa Rica, Croácia,

Chipre, República Dominicana, Geórgia, Indonésia,

Jordânia, Cazaquistão, Kosovo, Líbano, Lituânia, Antiga

República Jugoslava da Macedónia, Malásia, Malta,

Moldávia, Montenegro, Peru, Catar, Roménia,

Federação Russa, Singapura, Taipé Chinês, Tailândia,

Trindade e Tobago, Tunísia, Emirados Árabes Unidos,

Uruguai. Vietname.

(países em itálico – PBA)

PORTUGAL

18

Resultados Internacionais


PORTUGAL

SNG (556)

JPN (538)

EST (534)

TPE (532)

FIN (531)

TUN (386)

MKD (384)

KSV (378)

DZA (376)

DOM (332)

…DNK (502)

POL (501)

PRT (501)17.º

NOR (498)

EUA (496)

AUT (495)

FRA (495)

SWE (493)

ESP (493)

19


LITERACIA DE LEITURA

PORTUGAL

SNG (535)

HKG(527)

CAN (527)

FIN (526)

IRL (521)

…FRA (499)

BEL (499)

PRT (498) 18.º

GBR (498)

TPE (497)

EUA (497)

ESP (496)

RUS (495)

B-S-J-G (494)

MKD (352)

DZA (350)

KSV (347)

LBN (347)

20



PORTUGAL

SNG (564)

HKG(548)

MAC (544)

TPE (542)

JPN (532)

FRA (493)GBR (492)CZE (492)PRT (492)22.ºITA (490)

TUN (367)

KSV (362)

DZA (360)

DOM (328)

21


Tendências 2006/2012-2015

22

Ciências Leitura Matemática


PISA 2015 AMOSTRAEscolas/alunos selecionadas por amostragem aleatória multietapa:

1ª. Etapa: aleatória estratificada (NUTS III e Natureza Administrativa)

2ª. Etapa: aleatória simples (alunos com idades entre 15 anos e 3 meses e 16 anos e 2 meses a frequentar

pelo menos o 7.º ano ou equivalente em todas as modalidades de educação e formação)

PORTUGAL

246 (222 públicas + 24 particulares e cooperativas)(Taxa Amostragem: 24%)

4228 (M = 46,7 anos; 72% ♀)

7325 (M = 15,8 anos; 50% ♂)

(Taxa Amostragem: 7,5%)

R. A. Açores: 21% (sobreamostragem)

A. M. Lisboa: 18%

A. M. Porto: 13%

Outras NUTS III: 1 - 4,5 %

6881 Encarregados de educação

23



Evolução 2000-2015

PORTUGAL459

468

474

493

489

501

410

430

450

470

490

510

530

2000 2003 2006 2009 2012 2015

Po

nto

s na e

scala

das

Ciê

nci

as

+ 27

OCDE

1000

0

Portugal

Evolução

2000-2015Taxa Média

Portugal: +2,8 pontos/ano*

OCDE: -0,2 pontos/anons

24



CONTEÚDOS & COMPETÊNCIAS

PORTUGAL

25

498

502503

493

493493

485

495

505

Explicar

fenómenos

Avaliar e

conceber

investigações

Interpretar dados

e evidências

499

503500

493

492494

480

490

500

510

Sistemas

Físicos

Sistemas

Vivos

Terra e

Espaço

Portugal OCDE



Evolução 2006-2015 por ano de escolaridade

PORTUGAL

26

376

413

451

549

588

445

351

399

451

528

556

355

300

350

400

450

500

550

600

0 1 2 3 4 5 6 7

Po

ntu

açã

o n

a e

scala

das

Ciê

nci

as

em

2006 e

2015

Escolaridade

7.º 8.º 9.º 10.º 11.º Voc/Prof

2015

2006

60%

30%

10%

5%



Evolução por ano de escolaridade 2000 - 2015

PORTUGAL

7.º Ano: y = 2,7895x + 340,00

8.º Ano: y = 2,7226x + 378,71

9.º Ano: y = 2,59x + 429,06

10.ºAno: y = 2,6033x + 506,75

Média: y = 2,7932x + 459,76

300

350

400

450

500

550

0 3 6 9 12 15

Po

ntu

açã

o n

a e

scala

das

Ciê

nci

as

2000 2003 2006 2009 2012 2015

27



Evolução Low Achievers : Top Performers 2000 - 2015

PORTUGAL

28

24,5%

16,5%

19,0%

17,4%

3,1%

4,2%

4,5%

7,4%

2006

2009

2012

2015

Abaixo do Nível 2 Nível 5 ou Acima

Low Achievers (< 410 pontos; abaixo do nível 2): Conhecimentos elementares e competências básicas na utilização de conteúdos e procedimentos

Top Performers ( 633 pontos; nível 5 ou 6):Conhecimentos epistemológicos e competências avançadas na utilização de conteúdos e procedimentos



Resultados regionais

PORTUGAL

NUTS III

Alentejo Litoral 536 (8,1)

Lezíria do Tejo 522 (6,4)

Douro 522 (40,0)

Beira Baixa 519 (6,6)

Região de Leiria 519 (8,2)

Alto Minho 517 (15,3)

Viseu Dão Lafões 515 (6,6)

Região de Coimbra 512 (12,1)

Área Metropolitana de Lisboa 508 (5,3)

Médio Tejo 508 (9,8)

Área Metropolitana do Porto 506 (5,1)

Beiras e Serra da Estrela 504 (9,0)

Oeste 501 (21,1)

Alto Alentejo 501 (8,9)

Portugal 501 (2,4)

Alentejo Central 498 (16,0)

Região de Aveiro 498 (14,6)

Ave 489 (14,6)

Cávado 487 (6,4)

Região Autónoma da Madeira 487 (14,6)

Algarve 485 (11,2)

Baixo Alentejo 470 (21,0)

Região Autónoma dos Açores 470 (2,3)

Terras de Trás-os-Montes 465 (6,8)

Alto Tâmega 461 (40,3)

Tâmega e Sousa 460 (11,0)

Média (S.E. )

29




PORTUGAL

NUTS III



Douro 522 (40,0)










Oeste 501 (21,1)


Portugal 501 (2,4)



Ave 489 (14,6)

Cávado 487 (6,4)


Algarve 485 (11,2)






Média (S.E. )

30



Evolução 2000 - 2015

PORTUGAL

Evolução



OCDE: 0,1 pontos/ano ns470

478

472

489 488

498

430

450

470

490

510

530

2000 2003 2006 2009 2012 2015

Po

nto

s na e

scala

da L

eitura

+ 10 n.s.

Portugal

OCDE

1000

0

31




PORTUGAL

7.º Ano: y = 3,3425x + 322,19

8.º Ano: y = 2,6333x + 373,71

9.º Ano: y = 1,8184x + 435,32

10.ºAno: y = 1,1077x + 524,41

Média: y = 1,7793x + 469,18

300

350

400

450

500

550

0 3 6 9 12 15

Po

ntu

açã

o n

a e

scala

da L

eitura

2000 2003 2006 2009 2012 2015

32




PORTUGAL

NUTS III




Douro 512 (38,5)







Oeste 502 (24,4)





Portugal 498 (2,7)

Ave 495 (12,5)


Algarve 490 (9,9)

Cávado 488 (10,6)







Média (S.E. )

33




PORTUGAL

NUTS III




Douro 512 (38,5)







Oeste 502 (24,4)





Portugal 498 (2,7)

Ave 495 (12,5)


Algarve 490 (9,9)

Cávado 488 (10,6)







Média (S.E. )

34



Evolução 2000-2015

PORTUGAL

Evolução



OCDE: -0,3 pontos/anons454

466

466

487

487

492

410

430

450

470

490

510

530

2000 2003 2006 2009 2012 2015

Po

nto

s na e

scala

da M

ate

mática

+ 5 n.s.

Portugal

OCDE

1000

0

35




PORTUGAL

7.º Ano: y = 2,6773x + 329,25

8.º Ano: y = 1,7779x + 374,12

9.º Ano: y = 1,7754x + 427,5

10.º Ano: y = 2,6622x + 503,55

Média: y = 2,6207x + 455,66

300

350

400

450

500

550

0 3 6 9 12 15

Po

ntu

açã

o n

a e

scala

da M

ate

mática

2000 2003 2006 2009 2012 2015

36


LITERACIA DE MATEMÁTICA


PORTUGAL

NUTS III






Douro 509 (39,1)








Portugal 492 (2,5)



Oeste 488 (20,9)

Cávado 486 (7,6)

Ave 484 (14,9)


Algarve 471 (12,1)






Média (S.E. )

37




PORTUGAL

NUTS III






Douro 509 (39,1)








Portugal 492 (2,5)



Oeste 488 (20,9)

Cávado 486 (7,6)

Ave 484 (14,9)


Algarve 471 (12,1)






Média (S.E. )

38

Programme for International Student Assessment

PISA 2015 − PORTUGAL Apresentação dos


[email protected]

Obrigado pela atenção!

Documents

Apresentação do PowerPointn2.iave.pt/images/FicheirosPDF/Estudos_Internacionais/A... · 2018. 6. 27. · Sintra, 6 dezembro 2016 João Marôco, Ph. D. [email protected] ... POL