Apresentação
dos
Resultados Nacionais
Sintra, 6 dezembro 2016
João Marôco, Ph. D.
Programme for International Student Assessment
PISA 2015 − PORTUGAL
459
501
470
498
454
492
400
420
440
460
480
500
520
540
2000 2003 2006 2009 2012 2015
Po
ntu
açã
o n
a E
scala
PIS
A
Ano
Ciências Leitura Matemática
1000
0
OCDE
PortugalPORTUGAL
3
Programme for International Student Assessment …… avalia se os alunos de 15 anos, em todas as modalidades de educação e formação, conseguem
mobilizar os seus conhecimentos e competências de leitura, matemática ou ciências na resolução
de situações relacionadas com o dia a dia das sociedades contemporâneas.
O que é o PISA?
PORTUGAL
Domínios de Avaliação (OCDE, 2016):
LITERACIA CIENTÍFICA
«
».
LITERACIA LEITURA
«
».
LITERACIA MATEMÁTICA
«
».
Formular Aplicar Interpretar Localizar Interpretar Avaliar Explicar Avaliar Interpretar
4
Programme for International Student Assessment …… avalia se os alunos de 15 anos, em todas as modalidades de educação e formação, conseguem
mobilizar os seus conhecimentos e competências de leitura, matemática ou ciências na resolução
de situações relacionadas com o dia a dia das sociedades contemporâneas.
O que é o PISA?
PORTUGAL
Domínios de Avaliação (OCDE, 2016):
5
RESOLUÇÃO COLABORATIVA
DE PROBLEMAS
«
Novo em 2015:
O teste PISA 2015
PORTUGAL
6
Formato tradicional do PISA:
Papel-e-Lápis
Exemplo de item de
Ciências
O teste PISA 2015
PORTUGAL
Formato tradicional do PISA:
Papel-e-Lápis
Exemplo de item de
Ciências
7
O teste PISA 2015
PORTUGAL
Formato tradicional do PISA:
Papel-e-Lápis
Exemplo de item de
Matemática
8
O teste PISA 2015
PORTUGAL
NOVO FORMATO:
Computer Based Assessment
(Avaliação em Computador)
9
O teste PISA 2015
PORTUGAL
CBA
Exemplo
de item de
Ciências
10
O teste PISA 2015
PORTUGAL
CBA
Exemplo
de item de
Ciências
11
O teste PISA 2015
PORTUGAL
CBA
Exemplo
de item de
Ciências
12
O teste PISA 2015
PORTUGAL
Invariância de modo PBA vs. CBA?O teste em computador (CBA) mantém as mesmas qualidades psicométricas do teste em Papel-e-lápis (PBA)?
• Os itens têm o mesmo índice de dificuldade e discriminação?
• Os construtos (dimensões de literacia) são os mesmos?
• A validade e a fiabilidade dos resultados não se altera?
Estudo Piloto
INVARIÂNCIA DE MODO (2014):Trend
PBA
(23%)
CBA
(35%)CBA
(42 %)
New & CPS
AMOSTRA: 53 Países
n 2000/país
25-30 escolas/país
ni 70 alunos/escola
2 salas em simultâneo (PBA+CBA)
1 sala ou outro período do dia.
13
O teste PISA 2015
PORTUGAL
Invariância de modo PBA vs. CBA?
RESULTADOS:
DomínioMédias Internacionais (P+)
CBA PBA CBA−PBA
Matemática 0,45 0,47 -0,02
Leitura 0,60 0,59 +0,01
Ciências 0,49 0,50 -0,01
Índice de Dificuldade (TCT)(Proporção respostas corretas)
300
350
400
450
500
550
600
650
300 350 400 450 500 550 600 650
PB
A
CBA
0
0
1000
1000
////
1 : 1Correlação entre as pontuações médias
obtidas em ciências, matemática e leitura
em modo CBA e em modo PBA:
MATEMÁTICA (r = 0,97; b = 1,05)
CIÊNCIAS (r = 0,97; b = 1,06)
LEITURA (r = 0,96; b = 0,98)
14
O teste PISA 2015
PORTUGAL
• Conjunto de itens de seleção (simples, múltipla, complexa) e itens de construção …
• Recorre a suportes variados (textos, mapas, gráficos e figuras e simulações em computador)
3 domínios clássicos + 1 domínio novo (Resolução Colaborativa de Problemas - CPS)
33%
33% 22%
4%4%
4%
Tempo total de testagem 4 domínios: 13h 30min.
Duração do Teste: 2 h
( + 30 min. questionário ao aluno)
•Domínio principal (Ciências) - avaliado em
todos os alunos - 1 h de teste
•Domínios secundários – Distribuídos em
diferentes proporções - 2.ª hora do teste
• 66 versões de teste
15
Organização para a Cooperação e Desenvolvimento Económica (OCDE)
Organização composta por 35 estados membros com a missão de promover
políticas que melhorem o bem estar económico e social dos cidadãos de
todo o mundo. Promove o PISA desde 2000.
Quem é responsável pelo PISA?
www.iave.pt
Instituto de Avaliação Educativa, I. P.
Instituto Público responsável pela elaboração de instrumentos de
avaliação externa de alunos no ensino básico e secundário e pela
coordenação e aplicação dos estudos internacionais de avaliação de
alunos (TIMSS, PISA, PIRLS, ICILS,….)
Consórcio PISA 2015
Organizações públicas e privadas responsáveis pelas diferentes
tarefas/módulos do PISA 2015:
- ETS: Framework e itens; Student Delivery System; Estimação scores PISA
- Pearson: Framework e criação de itens
- Westat: Amostragem e estimação pesos amostragem
- DIPF: Questionários de Contexto e criação de escalas psicométricas
PORTUGAL
16
Porquê participar no PISA?
Andreas Schleicher, OECD
A participação nacional permite avaliar a literacia científica, literacia de leitura e literacia matemática – domínios fundamentais à cidadania nas sociedades contemporâneas, em jovens próximo do final da escolaridade obrigatória.
• O que conseguem fazer, com o que aprendem na escola, os nossos jovens de 15 anos?
• O que é importante para um cidadão «saber» e «conseguir fazer» para o exercício pleno da cidadania nas sociedades modernas?
• Literacia (capacidade de mobilizar conhecimentos e competências) e não simplesconhecimento de conteúdos curriculares
• Referencial internacional estabelecido por peritos em educação de todo o mundo
• Informação sobre as variáveis de contexto socioeconómico e cultural que influenciam o ensino e a aprendizagem
• Orientações para medidas de política educacional e programas de apoio curricular
PORTUGAL
17
Quem participou no PISA 2015?
72 países e economias17 565 escolas
509 000 alunos
143 000 enc. de educação
95 000 professoresPAÍSES MEMBROS DA OCDE: PAÍSES E ECONOMIAS NÃO MEMBROS DA OCDE:
Austrália, Áustria, Bélgica, Canadá, Chile,
República Checa, Dinamarca, Estónia,
Finlândia, França, Alemanha, Grécia,
Hungria, Islândia, Irlanda, Israel, Itália,
Japão, Letónia, Luxemburgo, México,
Holanda, Nova Zelândia, Noruega,
Polónia, Portugal, República Eslovaca,
Eslovénia, República da Coreia, Espanha,
Suécia, Suíça, Turquia, Reino Unido,
Estados Unidos da América.
Albânia, Argélia, Argentina, Brasil, Bulgária, as
provinciais de Beijing-Shangai-Jiangsu-Guandong da
China [reportadas como B-S-J-G (China)], Hong Kong
(China), Macau (China), Colômbia, Costa Rica, Croácia,
Chipre, República Dominicana, Geórgia, Indonésia,
Jordânia, Cazaquistão, Kosovo, Líbano, Lituânia, Antiga
República Jugoslava da Macedónia, Malásia, Malta,
Moldávia, Montenegro, Peru, Catar, Roménia,
Federação Russa, Singapura, Taipé Chinês, Tailândia,
Trindade e Tobago, Tunísia, Emirados Árabes Unidos,
Uruguai. Vietname.
(países em itálico – PBA)
PORTUGAL
18
Resultados Internacionais
LITERACIA CIENTÍFICA
PORTUGAL
SNG (556)
JPN (538)
EST (534)
TPE (532)
FIN (531)
TUN (386)
MKD (384)
KSV (378)
DZA (376)
DOM (332)
…DNK (502)
POL (501)
PRT (501)17.º
NOR (498)
EUA (496)
AUT (495)
FRA (495)
SWE (493)
ESP (493)
19
Resultados Internacionais
LITERACIA DE LEITURA
PORTUGAL
SNG (535)
HKG(527)
CAN (527)
FIN (526)
IRL (521)
…FRA (499)
BEL (499)
PRT (498) 18.º
GBR (498)
TPE (497)
EUA (497)
ESP (496)
RUS (495)
B-S-J-G (494)
MKD (352)
DZA (350)
KSV (347)
LBN (347)
20
Resultados Internacionais
LITERACIA MATEMÁTICA
PORTUGAL
SNG (564)
HKG(548)
MAC (544)
TPE (542)
JPN (532)
FRA (493)GBR (492)CZE (492)PRT (492)22.ºITA (490)
TUN (367)
KSV (362)
DZA (360)
DOM (328)
21
Resultados Internacionais
Tendências 2006/2012-2015
22
Ciências Leitura Matemática
Resultados Nacionais
PISA 2015 AMOSTRAEscolas/alunos selecionadas por amostragem aleatória multietapa:
1ª. Etapa: aleatória estratificada (NUTS III e Natureza Administrativa)
2ª. Etapa: aleatória simples (alunos com idades entre 15 anos e 3 meses e 16 anos e 2 meses a frequentar
pelo menos o 7.º ano ou equivalente em todas as modalidades de educação e formação)
PORTUGAL
246 (222 públicas + 24 particulares e cooperativas)(Taxa Amostragem: 24%)
4228 (M = 46,7 anos; 72% ♀)
7325 (M = 15,8 anos; 50% ♂)
(Taxa Amostragem: 7,5%)
R. A. Açores: 21% (sobreamostragem)
A. M. Lisboa: 18%
A. M. Porto: 13%
Outras NUTS III: 1 - 4,5 %
6881 Encarregados de educação
23
Resultados Nacionais
LITERACIA CIENTÍFICA
Evolução 2000-2015
PORTUGAL459
468
474
493
489
501
410
430
450
470
490
510
530
2000 2003 2006 2009 2012 2015
Po
nto
s na e
scala
das
Ciê
nci
as
+ 27
OCDE
1000
0
Portugal
Evolução
2000-2015Taxa Média
Portugal: +2,8 pontos/ano*
OCDE: -0,2 pontos/anons
24
Resultados Nacionais
LITERACIA CIENTÍFICA
CONTEÚDOS & COMPETÊNCIAS
PORTUGAL
25
498
502503
493
493493
485
495
505
Explicar
fenómenos
Avaliar e
conceber
investigações
Interpretar dados
e evidências
499
503500
493
492494
480
490
500
510
Sistemas
Físicos
Sistemas
Vivos
Terra e
Espaço
Portugal OCDE
Resultados Nacionais
LITERACIA CIENTÍFICA
Evolução 2006-2015 por ano de escolaridade
PORTUGAL
26
376
413
451
549
588
445
351
399
451
528
556
355
300
350
400
450
500
550
600
0 1 2 3 4 5 6 7
Po
ntu
açã
o n
a e
scala
das
Ciê
nci
as
em
2006 e
2015
Escolaridade
7.º 8.º 9.º 10.º 11.º Voc/Prof
2015
2006
60%
30%
10%
5%
Resultados Nacionais
LITERACIA CIENTÍFICA
Evolução por ano de escolaridade 2000 - 2015
PORTUGAL
7.º Ano: y = 2,7895x + 340,00
8.º Ano: y = 2,7226x + 378,71
9.º Ano: y = 2,59x + 429,06
10.ºAno: y = 2,6033x + 506,75
Média: y = 2,7932x + 459,76
300
350
400
450
500
550
0 3 6 9 12 15
Po
ntu
açã
o n
a e
scala
das
Ciê
nci
as
2000 2003 2006 2009 2012 2015
27
Resultados Nacionais
LITERACIA CIENTÍFICA
Evolução Low Achievers : Top Performers 2000 - 2015
PORTUGAL
28
24,5%
16,5%
19,0%
17,4%
3,1%
4,2%
4,5%
7,4%
2006
2009
2012
2015
Abaixo do Nível 2 Nível 5 ou Acima
Low Achievers (< 410 pontos; abaixo do nível 2): Conhecimentos elementares e competências básicas na utilização de conteúdos e procedimentos
Top Performers ( 633 pontos; nível 5 ou 6):Conhecimentos epistemológicos e competências avançadas na utilização de conteúdos e procedimentos
Resultados Nacionais
LITERACIA CIENTÍFICA
Resultados regionais
PORTUGAL
NUTS III
Alentejo Litoral 536 (8,1)
Lezíria do Tejo 522 (6,4)
Douro 522 (40,0)
Beira Baixa 519 (6,6)
Região de Leiria 519 (8,2)
Alto Minho 517 (15,3)
Viseu Dão Lafões 515 (6,6)
Região de Coimbra 512 (12,1)
Área Metropolitana de Lisboa 508 (5,3)
Médio Tejo 508 (9,8)
Área Metropolitana do Porto 506 (5,1)
Beiras e Serra da Estrela 504 (9,0)
Oeste 501 (21,1)
Alto Alentejo 501 (8,9)
Portugal 501 (2,4)
Alentejo Central 498 (16,0)
Região de Aveiro 498 (14,6)
Ave 489 (14,6)
Cávado 487 (6,4)
Região Autónoma da Madeira 487 (14,6)
Algarve 485 (11,2)
Baixo Alentejo 470 (21,0)
Região Autónoma dos Açores 470 (2,3)
Terras de Trás-os-Montes 465 (6,8)
Alto Tâmega 461 (40,3)
Tâmega e Sousa 460 (11,0)
Média (S.E. )
29
Resultados Nacionais
LITERACIA CIENTÍFICA
Resultados regionais
PORTUGAL
NUTS III
Alentejo Litoral 536 (8,1)
Lezíria do Tejo 522 (6,4)
Douro 522 (40,0)
Beira Baixa 519 (6,6)
Região de Leiria 519 (8,2)
Alto Minho 517 (15,3)
Viseu Dão Lafões 515 (6,6)
Região de Coimbra 512 (12,1)
Área Metropolitana de Lisboa 508 (5,3)
Médio Tejo 508 (9,8)
Área Metropolitana do Porto 506 (5,1)
Beiras e Serra da Estrela 504 (9,0)
Oeste 501 (21,1)
Alto Alentejo 501 (8,9)
Portugal 501 (2,4)
Alentejo Central 498 (16,0)
Região de Aveiro 498 (14,6)
Ave 489 (14,6)
Cávado 487 (6,4)
Região Autónoma da Madeira 487 (14,6)
Algarve 485 (11,2)
Baixo Alentejo 470 (21,0)
Região Autónoma dos Açores 470 (2,3)
Terras de Trás-os-Montes 465 (6,8)
Alto Tâmega 461 (40,3)
Tâmega e Sousa 460 (11,0)
Média (S.E. )
30
Resultados Nacionais
LITERACIA DE LEITURA
Evolução 2000 - 2015
PORTUGAL
Evolução
2000-2015Taxa Média
Portugal: +1,8 pontos/ano*
OCDE: 0,1 pontos/ano ns470
478
472
489 488
498
430
450
470
490
510
530
2000 2003 2006 2009 2012 2015
Po
nto
s na e
scala
da L
eitura
+ 10 n.s.
Portugal
OCDE
1000
0
31
Resultados Nacionais
LITERACIA DE LEITURA
Evolução por ano de escolaridade 2000 - 2015
PORTUGAL
7.º Ano: y = 3,3425x + 322,19
8.º Ano: y = 2,6333x + 373,71
9.º Ano: y = 1,8184x + 435,32
10.ºAno: y = 1,1077x + 524,41
Média: y = 1,7793x + 469,18
300
350
400
450
500
550
0 3 6 9 12 15
Po
ntu
açã
o n
a e
scala
da L
eitura
2000 2003 2006 2009 2012 2015
32
Resultados Nacionais
LITERACIA DE LEITURA
Resultados regionais
PORTUGAL
NUTS III
Alentejo Litoral 534 (11,1)
Região de Leiria 514 (11,7)
Beira Baixa 513 (13,1)
Douro 512 (38,5)
Viseu Dão Lafões 511 (8,5)
Médio Tejo 511 (10,6)
Lezíria do Tejo 510 (7,3)
Alentejo Central 507 (28,8)
Área Metropolitana de Lisboa 505 (5,6)
Alto Minho 503 (16,8)
Oeste 502 (24,4)
Região de Coimbra 501 (12,8)
Beiras e Serra da Estrela 501 (14,6)
Área Metropolitana do Porto 501 (5,3)
Região de Aveiro 499 (12,4)
Portugal 498 (2,7)
Ave 495 (12,5)
Alto Alentejo 493 (7,7)
Algarve 490 (9,9)
Cávado 488 (10,6)
Região Autónoma da Madeira 487 (15,5)
Baixo Alentejo 475 (27,2)
Região Autónoma dos Açores 470 (2,8)
Tâmega e Sousa 457 (14,2)
Terras de Trás-os-Montes 456 (21,0)
Alto Tâmega 442 (42,3)
Média (S.E. )
33
Resultados Nacionais
LITERACIA DE LEITURA
Resultados regionais
PORTUGAL
NUTS III
Alentejo Litoral 534 (11,1)
Região de Leiria 514 (11,7)
Beira Baixa 513 (13,1)
Douro 512 (38,5)
Viseu Dão Lafões 511 (8,5)
Médio Tejo 511 (10,6)
Lezíria do Tejo 510 (7,3)
Alentejo Central 507 (28,8)
Área Metropolitana de Lisboa 505 (5,6)
Alto Minho 503 (16,8)
Oeste 502 (24,4)
Região de Coimbra 501 (12,8)
Beiras e Serra da Estrela 501 (14,6)
Área Metropolitana do Porto 501 (5,3)
Região de Aveiro 499 (12,4)
Portugal 498 (2,7)
Ave 495 (12,5)
Alto Alentejo 493 (7,7)
Algarve 490 (9,9)
Cávado 488 (10,6)
Região Autónoma da Madeira 487 (15,5)
Baixo Alentejo 475 (27,2)
Região Autónoma dos Açores 470 (2,8)
Tâmega e Sousa 457 (14,2)
Terras de Trás-os-Montes 456 (21,0)
Alto Tâmega 442 (42,3)
Média (S.E. )
34
Resultados Nacionais
LITERACIA MATEMÁTICA
Evolução 2000-2015
PORTUGAL
Evolução
2000-2015Taxa Média
Portugal: +2,6 pontos/ano*
OCDE: -0,3 pontos/anons454
466
466
487
487
492
410
430
450
470
490
510
530
2000 2003 2006 2009 2012 2015
Po
nto
s na e
scala
da M
ate
mática
+ 5 n.s.
Portugal
OCDE
1000
0
35
Resultados Nacionais
LITERACIA MATEMÁTICA
Evolução por ano de escolaridade 2000 - 2015
PORTUGAL
7.º Ano: y = 2,6773x + 329,25
8.º Ano: y = 1,7779x + 374,12
9.º Ano: y = 1,7754x + 427,5
10.º Ano: y = 2,6622x + 503,55
Média: y = 2,6207x + 455,66
300
350
400
450
500
550
0 3 6 9 12 15
Po
ntu
açã
o n
a e
scala
da M
ate
mática
2000 2003 2006 2009 2012 2015
36
Resultados Nacionais
LITERACIA DE MATEMÁTICA
Resultados regionais
PORTUGAL
NUTS III
Alentejo Litoral 528 (14,3)
Alto Minho 518 (11,0)
Viseu Dão Lafões 514 (13,4)
Lezíria do Tejo 513 (8,9)
Beira Baixa 510 (14,9)
Douro 509 (39,1)
Região de Leiria 506 (17,3)
Médio Tejo 503 (10,6)
Beiras e Serra da Estrela 503 (13,2)
Região de Coimbra 502 (15,7)
Alto Alentejo 499 (13,7)
Área Metropolitana do Porto 496 (5,8)
Área Metropolitana de Lisboa 493 (4,7)
Portugal 492 (2,5)
Região de Aveiro 490 (15,6)
Região Autónoma da Madeira 490 (15,2)
Oeste 488 (20,9)
Cávado 486 (7,6)
Ave 484 (14,9)
Alentejo Central 479 (9,9)
Algarve 471 (12,1)
Baixo Alentejo 462 (25,3)
Região Autónoma dos Açores 462 (2,3)
Alto Tâmega 461 (43,7)
Terras de Trás-os-Montes 455 (15,1)
Tâmega e Sousa 454 (11,9)
Média (S.E. )
37
Resultados Nacionais
LITERACIA MATEMÁTICA
Resultados regionais
PORTUGAL
NUTS III
Alentejo Litoral 528 (14,3)
Alto Minho 518 (11,0)
Viseu Dão Lafões 514 (13,4)
Lezíria do Tejo 513 (8,9)
Beira Baixa 510 (14,9)
Douro 509 (39,1)
Região de Leiria 506 (17,3)
Médio Tejo 503 (10,6)
Beiras e Serra da Estrela 503 (13,2)
Região de Coimbra 502 (15,7)
Alto Alentejo 499 (13,7)
Área Metropolitana do Porto 496 (5,8)
Área Metropolitana de Lisboa 493 (4,7)
Portugal 492 (2,5)
Região de Aveiro 490 (15,6)
Região Autónoma da Madeira 490 (15,2)
Oeste 488 (20,9)
Cávado 486 (7,6)
Ave 484 (14,9)
Alentejo Central 479 (9,9)
Algarve 471 (12,1)
Baixo Alentejo 462 (25,3)
Região Autónoma dos Açores 462 (2,3)
Alto Tâmega 461 (43,7)
Terras de Trás-os-Montes 455 (15,1)
Tâmega e Sousa 454 (11,9)
Média (S.E. )
38
Programme for International Student Assessment
PISA 2015 − PORTUGAL Apresentação dos
Resultados Nacionais
Obrigado pela atenção!
Top Related