1 Motivação e metodologia 1. Motivação e metodologia 2. Comparação entre PISA 2006/PISA 2009/PISA 2012 • Escolas Públicas • Escolas Privadas 3. Comparação entre a amostra do PISA e a população escolar • Escolas Públicas • Escolas Privadas • Todas as Escolas • Todas as Escolas 4. Conclusões
N t
édi
t t
PISA d 2006 2012 P t
l
Notas médias nos testes PISA de 2006 a 2012, Portugal
PISA 2006
PISA 2009
PISA 2012
PISA 2006
PISA 2009
PISA 2012
Leitura
472
489
488
Matemática
466
487
487
Ciências
474
493
489
Di t ib i ã
t
PISA 2006 2012
i l d
i
.0 0 4 .005 3 .0 0 4 .004 .0 05Distribuição notas PISA 2006‐2012 por ano e ciclo de ensino
0 01 .0 0 2 .0 0 3 k d ens it y are a d .0 0 1 .002 .0 0 3 kd ens it y am a th 0 01 .0 02 .0 03 k d e n si ty as ci e 0. 0 0 200 400 600 800 x Leitura 2006 Leitura 2009 Leitura 2012 0 0 200 400 600 800 x Matemática 2006 Matemática 2009 Matemática 2012 0. 0 0 200 400 600 800 x Ciências 2006 Ciências 2009 Ciências 2012•
Deslocação para a direita das distribuições de 2006 para 2009, o que revela uma melhoria ao
l
d t d
t
d
l
ifi
õ
longo de todo o espectro de classificações.
•
A distribuição das notas em 2012 é semelhante à registada em 2009.
Foi tomada como referência a amostra estratificada dos PISA 2006 2012 A cada observação
Foi tomada como referência a amostra estratificada dos PISA 2006‐2012. A cada observação
está associado um factor de extrapolação atribuído pelo PISA.
Resumo das amostras utilizadas:
PISA 2006 PISA 2009 PISA 2012
PISA 2006 PISA 2009 PISA 2012
Número de observações 5109 (593 – privado) 6298 (682 ‐ privado) 5722 (583 ‐privado) População representada 90079 (9143 ‐ privado) 96820 (14012 ‐ privado) 96034 (10129 ‐ privado)
• O PISA é acompanhado por três inquéritos: aos alunos, aos pais dos alunos, e às escolas.
• Destes inquéritos foram extraídas diferentes variáveis por forma a caracterizar a amostra usada nos dif t t t PISA id tifi f t li ti d di t ib i ã l ã d t
diferentes testes PISA e identificar fatores explicativos da distribuição e evolução das notas: •Género •Região Geográficag g •Formação do Pai •Formação da Mãe •Naturalidade do Pai •Naturalidade da Mãe N t lid d d Al •Naturalidade do Aluno •Escola Pública vs. Privada •Ano e Ciclo de Ensino.
Tendo em conta a disponibilidade de dados para a população, os factores críticos em termos da (não‐) representatividade das amostras PISA e as desagregações que capturam diferenças no desempenho dos representatividade das amostras PISA, e as desagregações que capturam diferenças no desempenho dos alunos:
Iremos apenas apresentar os resultados da análise desagregada por Escolas Públicas vs.
p
p
g g
p
Privadas, e Ano e Ciclo dos alunos.
4 .006 .0 0 8 .0 1 0 04 .006 .008 ty ar ead 0 .0 0 2 .00 4 0 200 400 600 800 x 0 .002 .0 k dens i 0 200 400 600 800 x 7º ano 8º ano9º ano Ciêntífico Humanístico
Tecnológico Profissional
0 200 400 600 800
x
7º ano 8º ano
9º ano Ciêntífico Humanísticos
Segmentação da amostra PISA
Os alunos do PISA foram agrupados considerando os seguintes critérios:
1. O ano escolar em que se encontravam
2 O ciclo de ensino que frequentavam
2. O ciclo de ensino que frequentavam
Tendo em conta estes dois critérios foram considerados os seguintes sub‐grupos: • 7º ‐ Ensino Regular • 8º ‐ Ensino Regular • 9º Ensino Regular • 9º ‐ Ensino Regular • Cursos de Educação e Formação • 10º/11º ano – Cursos Científico Humanísticos • 10º/11º ano – Cursos Tecnológicos • 10º/11º ano ‐ Cursos ProfissionaisDistribuição notas PISA 2006‐2012
7º
PISA09‐MISI09
Motivação e Metodologia
7º ano
.0 1 .0 0 8 .0 1 .004 .0 0 6 .008 kd en si ty a s cie .004 .0 0 6 k den s it y a read .004 .00 6 .008 k densi ty am ath 0 .0 0 2 100 200 300 400 500 x Ciê i 2006 Ciê i 2009 0 .0 0 2 100 200 300 400 500 x Leitura 2006 Leitura 2009 0 .002 100 200 300 400 500 xMatemática 2006 Matemática 2009 Ciências 2006 Ciências 2009 Ciências 2012
Leitura 2012
Matemática 2006 Matemática 2009 Matemática 2012
Distribuição notas PISA 2006‐2012
8º
.008 .008 0088º ano
.004 .006 d ens it y ar ead .004 .006 e nsi ty a m ath .004 .006 .0 e n s it y a sci e 0 .0 02 k d 200 300 400 500 600 700 x 0 .00 2 kd e 200 300 400 500 600 x 0 .002 kd 200 300 400 500 600 x Leitura 2006 Leitura 2009 Leitura 2012 Matemática 2006 Matemática 2009 Matemática 2012 Ciências 2006 Ciências 2009 Ciências 2012Nº alunos : 11548(2006); 8109(2009); 7154 (2012)
Distribuição notas PISA 2006‐2012
9º
.006 .0 0 8 .0 089º ano
0 2 .004 kdens it y aread .0 0 4 .0 0 6 k d ensi ty am a th .00 4 .0 06 k d e n si ty as ci e 0 .0 0 200 400 600 800 x 0 .002 200 400 600 800 x M t áti 2006 M t áti 2009 0 .002 200 300 400 500 600 700 x Ciê i 2006 Ciê i 2009Nº alunos : 25992(2006); 25020(2009); 24950 (2012)
Leitura 2006 Leitura 2009 Leitura 2012 Matemática 2006 Matemática 2009 Matemática 2012 Ciências 2006 Ciências 2009 Ciências 2012Nº alunos : 25992(2006); 25020(2009); 24950 (2012)
Distribuição notas PISA 2006‐2012
C
Ci
ífi
H
í i
PISA09‐MISI09
Motivação e Metodologia
Cursos Científico‐Humanísticos
.008 .006 .008 .004 .0 0 6 d ens it y ar e a d .004 e nsi ty am at h .004 .006 en s it y asc ie 0 .0 0 2 k d 300 400 500 600 700 x 0 .002 kd e 300 400 500 600 700 800 0 .0 0 2 kd 300 400 500 600 700 800 x Leitura 2006 Leitura 2009 Leitura 2009 x Matemática 2006 Matemática 2009 Matemática 2012 x Ciências 2006 Ciências 2009 Ciências 2012Nº alunos : 34089(2006); 45956(2009); 45843 (2012)
Distribuição notas PISA 2006‐2012
C
T
ló i
PISA09‐MISI09
Motivação e Metodologia
Cursos Tecnológicos
.008 .00 8 .0 0 8 .00 4 .00 6 k den s ity a read .0 0 4 .0 0 6 k de ns it y a m a th .0 0 4 .0 0 6 k de nsi ty a sci e 0 .002 k 300 400 500 600 700 x 0 .0 0 2 k 300 400 500 600 700 x 0 .0 0 2 k 300 400 500 600 700 x Leitura 2006 Leitura 2009 Leitura 2012 Leitura 2006 Leitura 2009 Leitura 2012 Ciências 2006 Ciências 2009 Ciências 2012Nº alunos : 10669(2006); 2587(2009); 225(2012)
PISA09‐MISI09
Motivação e Metodologia
Distribuição notas PISA 2006‐2012
C
fi i
i
008 015 1Cursos profissionais
.004 .006 . e n s it y ar ead .0 1 . e ns it y am at h 0 04 .0 0 6 .0 0 8 .0 k de ns it y a s ci e 0 .002 kd e 200 300 400 500 600 x 0 .00 5 kd e 300 400 500 600 700 x 0 .0 0 2 .0 k 200 400 600 800 x Leitura 2006 Leitura 2009 Leitura 2012 Matemática 2006 Matemática 2009 Matemática 2012 Ciências 2006 Ciências 2009 Ciências 2012Nº alunos : 114(2006); 6061(2009); 6870(2012)
Distribuição notas PISA 2006‐2012
C
d Ed
ã
F
ã
PISA09‐MISI09
Motivação e Metodologia
Cursos de Educação e Formação
.0 1 5 .0 08 .0 0 8 5 .0 1 d en s it y a rea d .00 4 .0 06 d ensi ty am a th .0 0 4 .0 0 6 d en si ty a s ci e 0 .0 0 5 k d 100 200 300 400 500 600 x 0 .002 k d 200 300 400 500 600 x 0 .002 k d 200 300 400 500 600 x Leitura 2006 Leitura 2009 Leitura 2012 Matemática 2006 Matemática 2009 Matemática 2012 Ciências 2006 Ciências 2009 Ciências 2012Nº alunos : 150(2006); 6717(2009); 8897(2012)
Distribuição dos alunos por ano e ciclo (em % ) – Escolas Públicas
PISA 2006 PISA 2009 PISA 2012 Diferença
2006‐2012 7º 7 2 2 ‐ 8º 13 9 8 8º 13 9 8 ‐ 9º 29 27 27 ‐ S dá i Ci tifi Secundário Cientifico Humanístico 38 48 46 + Secundário Tecnológico 11 1 0 ‐ Secundário Profissional 0 5 7 + Cursos de Educação e Formação (CEF) 2 7 10 + Formação (CEF)
Distribuição dos alunos por ano e ciclo (em % ) Escolas Privadas
PISA 2006 PISA 2009 PISA 2012 Diferença
2006 2012
Distribuição dos alunos por ano e ciclo (em % ) – Escolas Privadas
2006‐2012 7º 4 1 0 ‐ 8º 10 3 2 8º 10 3 2 ‐ 9º 28 17 19 ‐ Secundário Cientifico 39 43 66 Secundário Cientifico Humanístico 39 43 66 + Secundário Tecnológico 20 13 0 ‐ Secundário Profissional 0 14 10 + Cursos de Educação e 0 8 3 +Notas desagregadas por ano e ciclo – Leitura, Escolas Públicas
PISA 2006 PISA 2009 PISA 2012 Diferença
PISA 2006 PISA 2009 PISA 2012 ç
2006‐2012 7º 324 372 362 + 8º 389 407 407 + 8º 389 407 407 + 9º 446 460 464 + Secundário Cientifico Humanístico 540 539 540 . Humanístico Secundário Tecnológico 501 476 495 ‐ Secundário Profissional 410 467 479 +
Cursos de Educação e Formação Cursos de Educação e Formação
Notas desagregadas por ano e ciclo – Matemática, Escolas Públicas
PISA 2006 PISA 2009 PISA 2012 Diferença
PISA 2006 PISA 2009 PISA 2012 ç
2006‐2012 7º 336 369 357 + 8º 387 397 395 + 8º 387 397 395 + 9º 440 458 459 + Secundário Cientifico Humanístico 521 536 540 + Humanístico Secundário Tecnológico 501 515 498 ‐ Secundário Profissional 523 480 483 ‐
Cursos de Educação e Formação Cursos de Educação e Formação
Notas desagregadas por ano e ciclo – Leitura, Escolas Privadas
PISA 2006 PISA 2009 PISA 2012 Diferença
PISA 2006 PISA 2009 PISA 2012 ç
2006‐2012 7º 328 358 436 + 8º 411 431 430 + 8º 411 431 430 + 9º 468 490 500 + Secundário Cientifico Humanístico + Secundário 548 540 565 + Humanístico + Secundário Tecnológico 548 540 565 + Secundário Profissional ‐ 474 489 ‐ Cursos de Educação e Formação (CEF) ‐ 396 374 ‐ (CEF)
Notas desagregadas por ano e ciclo – Matemática, Escolas Privadas
PISA 2006 PISA 2009 PISA 2012 Diferença
PISA 2006 PISA 2009 PISA 2012 ç
2006‐2012 7º 336 369 392 + 8º 387 397 427 + 8º 387 397 427 + 9º 440 458 498 + Secundário Cientifico Humanístico + Secundário 521 536 567 + Humanístico + Secundário Tecnológico 521 536 567 + Secundário Profissional ‐ 480 505 ‐ Cursos de Educação e Formação ‐ 367 381 ‐ (CEF) ‐ 367 381 ‐
Bases de dados da população escolar
A análise feita anteriormente compara apenas as amostras usadas no PISA.
É
l
l
d d d
É relevante avaliar a representatividade destas amostras.
Diferentes bases de dados são utilizadas como fontes de informação:
•
O PISA 2006 é comparado com as Estatísticas da Educação de 2006 tanto para as
escolas públicas como para as escolas privadas.
•
O PISA 2009/2012 é confrontado com a MISI 2009/MISI 2012 para comparar os
alunos inscritos em escolas públicas.
•
Os alunos inscritos em escolas privadas são comparados com os dados presentes nas
Estatísticas da Educação 2009/2012.
Totais populacionais:
Estat Educ MISI 2009/ MISI 2012/
PISA 2006 Estat. Educ
2006 PISA 2009 Estat. Educ
2009
PISA 2012 Estat. Educ
2012 População – 90079 94964 96820 105226 96034 105805 Total 90079 94964 96820 105226 96034 105805 População – Público 80936 83777 82808 91989 85905 91178 População ‐ Privado 9143 11187 14012 13237 10129 14627 % sector público 90% 88% 86% 87% 89% 86%
Nos três testes PISA considerados, a amostra ponderada não reflecte a real população
Comparação PISA/população escolar‐ Escolas Públicas
Estat. Educ
PISA 2006 Estat. Educ
2006 PISA 2009 MISI 2009 PISA 2012 MISI 2012
7º 7 8 2 5 2 4 8º 13 14 9 10 8 7 8º 13 14 9 10 8 7 9º 29 29 28 20 27 20 Secundário Cientifico Humanístico 38 37 47 47 46 50 Humanístico Secundário Tecnológico 11 6 1 1 0 0 Secundário Profissional 0 0 5 7 7 8 Cursos de Educação e Cursos de Educação e Formação (CEF) 2 5 7 10 10 10
Estat. Educ Estat. Educ Estat. Educ
Comparação PISA/população escolar‐ Escolas Privadas
PISA 2006 Estat. Educ
2006 PISA 2009 Estat. Educ 2009 PISA 2012 Estat. Educ 2012 7º 4 4 1 2 0 1 8º 10 8 3 6 2 4 8º 10 8 3 6 2 4 9º 28 26 17 14 19 12 Secundário Cientifico Humanístico + 39+20 33+8 57+14 50 66+0 50 Humanístico + Secundário Tecnológico 39+20 33+8 57+14 50 66+0 50 Secundário Profissional 0 14 13 19 10 21 Cursos de Educação e F ã (CEF) 0 7 9 10 3 12 Formação (CEF) 0 7 9 10 3 12
ál l d
Os alunos do PISA foram agrupados considerando os seguintes critérios:
Recálculo das notas
1. O ano escolar em que se encontravam
2. O ciclo de ensino que frequentavam
1. Foi calculada a média da nota PISA em cada um dos sub‐grupos. Esta nota foi
posteriormente multiplicada pelo peso de cada um dos sub‐grupos na MISI
2009/MISI2012 ou Estatísticas 2006.
2. As notas do PISA2009/PISA2012 foram recalculadas considerando a população escolar
do ano do PISA anterior (2009 para o PISA 2012 e 2006 para PISA 2009)
Recálculo das notas do PISA considerando os pesos populacionais
da MISI/Estatísticas da Educação, Escolas Públicas
Segmentando por ano e ciclo de ensino
Nota recalculada PISA 2006 Nota PISA 2006 Nota recalculada PISA 2009 Nota PISA 2009 Nota recalculada PISA 2012 Nota PISA 2012 Leitura 461 469 478 486 483 481 Matemática 454 462 476 484 483 480
•
As notas de 2006 e 2009 após recalculadas são inferiores aquelas que são oficialmente
Recálculo das notas do PISA considerando os pesos populacionais
das Estatísticas da Educação – Escolas Privadas
Segmentando por ano e ciclo de ensino
Nota recalculada PISA 2006 Nota PISA 2006 Nota recalculada PISA 2009 Nota PISA 2009 Nota recalculada PISA 2012 Nota PISA 2012 Leitura 482 500 498 516 512 537 Matemática 480 497 490 514 516 539
•
As notas de 2006 a 2012 após recalculadas são inferiores aquelas que são oficialmente
reportadas
reportadas.
Decomposição das notas do PISA considerando os pesos
populacionais do PISA anterior
populacionais do PISA anterior
•Foi observada a nota média em cada um dos sub-grupos
•Graficamente podemos descrever o método geral de decomposição utilizado nas diferentes
•Graficamente podemos descrever o método geral de decomposição utilizado nas diferentes
abordagens aos resultados do PISA como:
(Nota PISA ano x| Distribuição populacional ano x) (Nota PISA ano y| Distribuição populacional ano y) (Nota PISA ano y| Distribuição populacional ano x)
populacional ano x) populacional ano x) populacional ano y)
Evolução nas notas explicada Evolução nas notas explicada
pela evolução das notas dos pela alteração na distribuição da população de acordo com o ano
e ciclo pela evolução das notas dos
Decomposição PISA 2006‐2012, Escolas Públicas
Decomposição PISA 2006 2012, Escolas Públicas
Escolas Públicas
N PISA Nota recalculada PISA 2006 Nota PISA 2009 distribuição 2006 PISA 2009 Nota PISA 2012 distribuição 2009 PISA 2012 Leitura 461 471 478 478 481 Matemática 454 470 476 477 480 +7 +6 +10 +16 +3 +3 0 +1A
l ã d 2006
2009 é
i it i
t
li d
l
lh i d
t
d
Nota: Cálculo baseados em totais populacionais MISI•A evolução de 2006 para 2009 é maioritariamente explicada pela melhoria das notas dos
alunos.
•Por sua vez a evolução de 2009 para 2012 é explicada em grande parte pela alteração na
•Por sua vez a evolução de 2009 para 2012 é explicada em grande parte pela alteração na
distribuição dos alunos considerando o ano e ciclo de ensino.
Decomposição PISA 2006‐2012, Escolas Privadas
Escolas Privadas
N t PISA 2009 Nota PISA
Nota recalculada PISA 2006 Nota PISA 2009 distribuição 2006 PISA 2009 2012 distribuição 2009 PISA 2012 Leitura 482 492 498 514 512 Matemática 480 485 490 517 516 +6 +5 +10 +5 ‐2 ‐1 +16 +27
•
De 2006 para 2009 denota‐se uma decomposição diferenciada para português e
matemática
Nota: Cálculo baseados em totais populacionais das Estatísticas da Educação/MISImatemática
•Ao contrário do que acontece no sistema público. a maioria da evolução de 2009 para
Decomposição PISA 2006‐2012, Todas as Escolas
Decomposição PISA 2006 2012, Todas as Escolas
Todas as Escolas
N PISA Nota recalculada PISA 2006 Nota PISA 2009 distribuição 2006 PISA 2009 Nota PISA 2012 distribuição 2009 PISA 2012 Leitura 466 478 483 486 487 Matemática 462 476 481 485 487 +5 +5 +12 +14 +1 +2 +3 +4•
Considerando todas as escolas do sistema público de ensino denotamos que tanto de
Nota: Cálculo baseados em totais populacionais das Estatísticas da Educação/MISI
•
Considerando todas as escolas do sistema público de ensino. denotamos que tanto de
2006 para 2009, como de 2009 para 2012, a melhoria da performances dos alunos,
tem um peso maior na evolução das notas do que a evolução da população
considerando a segmentação por ano e ciclo de ensino.
considerando a segmentação por ano e ciclo de ensino.
1. Diferenças nas notas PISA
•Existe uma grande diferença das notas médias se considerarmos a segmentação da l ã i l d i população por ano e ciclo de ensino.2. Representatividade da amostra
•Observa‐se que a população ponderada do PISA não reflecte a população escolar efectiva para os três anos em análise •Para os três anos em análise foram observados desvios entre a distribuição efectiva da população escolar por ano e ciclo de ensino e a distribuição presente na amostra nos diferentes PISA.3. Recálculo das notas PISA considerando a distribuição por ano e ciclo na população
l
escolar
• Após recálculo das notas, considerando a distribuição por ano e ciclo de ensino na população escolar obtém‐se notas mais baixas que as notas PISA em 2006 e 2009
escolar, obtém se notas mais baixas que as notas PISA em 2006 e 2009. • Em 2012 a nota recalculada está em linha com a nota publicada. • Não é possível inferir para a posição relativa de Portugal.
490
500
490
Leitura
Matemática
470
480
490
460
470
480
450
460
2006
2009
2012
440
450
2006
2009
2012
PISA
PISA recalculado
2006
2009
2012
4 Decomposição da evolução das notas PISA
4. Decomposição da evolução das notas PISA
Com base nas notas recalculadas conclui‐se que:
• Escolas Públicas: De 2006 para 2009 a evolução é maioritariamente explicada pelaEscolas Públicas: De 2006 para 2009 a evolução é maioritariamente explicada pela
melhoria das notas dos alunos em cada ano e ciclo. De 2009 para 2012 prevalece o efeito da alteração da distribuição da população por ano e ciclo de ensino. • Escolas Privadas: De 2006 para 2009 prevalece o efeito notas a Leitura, enquanto que em Matemática a evolução da nota é igualmente explicada pelos dois efeitos. De 2009 para d f 2012 domina o efeito nota. • Todas as escolas: Tanto de 2006 para 2009 como de 2009 para 2012 prevaleceu o efeito de melhoria das notas.
