Академический Документы
Профессиональный Документы
Культура Документы
e os Resultados do PISA
Seminrios
e Colquios
Adriana Ferro
Pedro Freitas
Lus Catela Nunes
Ana Balco Reis
Carmo Seabra
Hugo Reis
Manuel Coutinho Pereira
Cludia Sarrico
Joseph Conboy
Conceio Portela
Susana Faria
12
14
17
19
O PISA um estudo ancorado na idade dos quinze anos, idade que foi
tomada por se considerar que correspondia altura em que, na maioria dos
pases participantes, os jovens concluam o ensino obrigatrio e, muitos
deles passavam vida ativa. Este programa pretende avaliar a literacia dos
jovens de quinze anos e, portanto, a sua capacidade para enfrentar os
desafios que a vida ativa lhes pode colocar. Desenvolve-se em ciclos de
21
trs anos (PISA 2000, 2003, 2006, 2009 e 2012), estando j em curso a
preparao do PISA 2015, e avalia trs grandes domnios, literacia de
matemtica, literacia de leitura, literacia de cincias e, mais recentemente
tambm, a literacia relacionada com a resoluo de problemas. Em cada
ciclo, uma das trs reas principais, matemtica, leitura ou cincias,
eleita com domnio principal desse ciclo, o que quer dizer que a prova tem
uma grande predominncia, quer na avaliao de competncias, quer
mesmo nos questionrios que permitem recolher a tal informao de
contexto, de questes sobre esse domnio principal. Nos estudos PISA tm
estado envolvidos, ao longo dos vrios ciclos, todos os pases pertencentes
OCDE e tambm um conjunto vasto de economias parceiras, que em
2012 constituram sessenta e cinco pases que, como podemos ver na
Figura 1, representam j uma mancha bastante alargada de cobertura a
nvel mundial.
O estudo internacional PISA representa uma fonte de informao sobre
sistemas educativos de inegvel qualidade, quer ao nvel da construo
dos itens de avaliao, quer ao nvel do desenho do plano de amostragem,
possibilitando a avaliao das polticas educativas dos vrios pases
participantes. A OCDE planeia e documenta cuidadosamente todo o
processo de desenvolvimento das provas internacionais, de forma a
garantir a comparabilidade dos dados, definindo procedimentos
padronizados e implementando um exigente controlo de qualidade.
Por exemplo, realizada uma extensa srie de verificaes para garantir a
comparabilidade das tradues dos itens de avaliao e dos questionrios,
fornecida documentao detalhada sobre os padres de amostragem, so
minuciosamente verificadas as taxas de participao das escolas e dos
alunos e foi desenvolvido um ambicioso programa de garantia da
qualidade para monitorizar a recolha dos dados.
O plano de amostragem considerado neste projeto internacional considera
uma amostragem estratificada, em duas etapas. Na primeira etapa,
selecionada aleatoriamente uma amostra de escolas; na segunda, recolhese uma amostra aleatria de alunos das escolas previamente selecionadas.
Todo o processo de amostragem monitorizado pela instncia
22
e/ou cultural dos pais. Por outro lado, o desempenho dos alunos pode ser
analisado por valores de referncia internacionais (benchmarks), ou por
contedos e domnios cognitivos, podendo, assim, conduzir reflexo
sobre como melhorar as prticas em sala de aula, a aprendizagem ou a
formao de professores. No Grfico 1 podemos observar a distribuio
dos resultados dos alunos portugueses por nveis de proficincia nos ciclos
com domnio principal de literacia da matemtica (2003 e 2012).
Grfico 1. Distribuio dos resultados de Portugal por nvel de proficincia nos ciclos de
2003 e 2012 em Matemtica.
24
26
Licenciado em Histria (FL-UL) e Doutorado em Sociologia (FCSHUNL), professor Associado com Agregao em Sociologia (FCSHUNL),e atualmente Coordenador Executivo do Departamento de
Sociologia da Universidade Nova de Lisboa. Como investigador do
CICS.NOVA - Centro Interdisciplinar de Cincias Sociais, coordena os
projetos ESCXEL Rede de Escolas de Excelncia e ATLAS DA
EDUCAO Contextos Sociais e Locais do Sucesso e do Insucesso.
OCDE (2007). No More Failures: ten steps to equity in education. Paris: OCDE.
OCDE (2013, 2014). PISA 2012 Results (International Report), Vols. I, II,III, IV, V & VI.
OCDE (2014). PISA 2012 Results in Focus: What 15-year-olds know and what they can
do with what they know: Key results from PISA 2012.
OCDE (2015). Education Policy Outlook 2015: Making Reforms Happen, OCDE
Publishing.
ProjAVI (2013), PISA 2012. Portugal Primeiros Resultados. Lisboa: ProjAVI MEC.
UNICEF (2000). Defining Quality in Education, artigo apresentado em The International
Working Group on Education, Florence, Documento n. UNICEF/PD/ED/00/02.
http://www.projavi.mec.pt/
http://www.oecd.org/pisa/
29
Resultados para
Portugal
PISA 2006
PISA 2009
PISA 2012
Leitura
472
489
488
Matemtica
466
487
487
30
.003
.001
.002
kdensity amath
.003
.002
.001
0
kdensity aread
.004
.004
.005
200
400
x
Leitura 2006
Leitura 2012
600
800
200
Matemtica 2006
Matemtica 2012
Leitura 2009
400
x
600
800
Matemtica 2009
PISA 2006
PISA 2009
PISA 2012
Nmero de observaes
5 109
6 298
5 722
Populao representada
90 079
96 820
96 034
Varivel de estratificao
NUT II,
Dimenso da Escola,
Tipo de Escola
Distrito
Distrito
34
.006
.004
0
.002
kdensity aread
.008
200
400
x
7 ano
9 ano
Tecnolgico
CEF
600
8 ano
Cintfico Humansticos
Profissional
35
800
.002
.004
.006
.008
.01
200
400
x
7 ano
9 ano
Tecnolgico
CEF
600
800
8 ano
Cintfico Humanstico
Profissional
36
Populao
2006
PISA
2009
Populao
2009
PISA
2012
Populao
2012
N Total
Alunos
90079
94964
96820
105226
96034
105805
Escolas
Pblicas
80936
83777
82808
97989
85905
91178
Escolas
Privadas
9143
11187
14012
13237
10129
14627
%
Escolas
Publicas
90%
88%
86%
87%
89%
86%
37
Tabela 4. Distribuio dos alunos por ano e tipo de curso na populao e representada na
amostra PISA: escolas pblicas
Ano e tipo de curso
PISA
2006
Populao
2006
PISA
2009
Populao
2009
PISA
2012
Populao
2012
7%
8%
2%
5%
2%
4%
13%
14%
9%
10%
8%
7%
29%
29%
28%
20%
27%
20%
Secundrio Cientfico
Humanstico
38%
37%
49%
47%
45%
50%
Secundrio Tecnolgico
11%
6%
1%
1%
0%
0%
Secundrio Profissional
0%
0%
5%
7%
7%
8%
Cursos de Educao e
Formao (CEF)
2%
5%
7%
10%
10%
10%
PISA
2006
Populao
2006
PISA
2009
Populao
2009
PISA
2012
Populao
2012
4%
4%
1%
2%
0%
1%
10%
8%
3%
6%
2%
4%
28%
26%
17%
14%
19%
12%
Secundrio Cientfico
Humanstico +
Tecnolgico
39%+20%
33%+8%
57%+14%
50%
66%+0%
50%
Secundrio
Profissional
0%
14%
13%
19%
10%
21%
Cursos de Educao e
Formao (CEF)
0%
7%
9%
10%
3%
12%
39
Matemtica
(1)
(2)
(3)
(3)
Figura 4. Mtodo de decomposio da evoluo dos resultados PISA entre o ano x e o ano y
42
Baird, J. A., T. Isaacs, S. Johnson, G. Stobart, G. Yu, T. Sprague, & R. Daugherty. 2011.
Policy Effects of Pisa, Oxford University Centre for Educational Assessment.
Grek, S,. 2009. Governing by numbers: the PISA effect in Europe, Journal of
Education Policy, 24(1): 23-37.
Hanushek, E., and L., Woessman. 2011. The Economics of International Differences in
Educational Achievement in Handbook of the Economics of Education, Vol. 3,
North Holland.
OLeary, M., 2001, The Effects of Age-based and Grade-based Sampling on the
Relative Standing of Countries in International Comparative Studies of Student
Achievement, British Educational Research Journal, Vol. 27, No.2, pages 187-200.
Pereira, Coutinho M., 2011, "An analysis of the Portuguese Students' Performance in the
OECD Programme for International Student Assessment (PISA)", Economic
Bulletin, Banco de Portugal.
Pereira, Coutinho M., 2010, "Educational Attainment and Equality of opportunity cost in
Portugal and Europe. The role of school versus parental influence", Economic
Bulletin, Banco de Portugal.
Pereira, Coutinho M., Reis, H., 2012, "What accounts for Portuguese regional differences
in students' performance? Evidence from OECD PISA", Economic Bulletin, Banco
de Portugal.
43
44
Banco de Portugal.
45
46
Grfico 1. Percentagem de alunos que repetiram uma ou mais vezes no ensino bsico
47
Para os restantes pases europeus o nmero de anos de escolaridade em cada nvel CITE
semelhante mas no necessariamente o mesmo. Para mais detalhes sobre cada pas, ver Eurydice
(2013).
48
No-repetentes
Repetentes apenas no ISCED 1
Repetentes apenas no ISCED 2
Repetentes no ISCED 1 e ISCED 2
Total
Por memria:
Nmero de pases
Percentagem (%)
2003
2009
Total
81,5
82,5
82,0
6,5
6,4
6,4
10,5
9,7
10,1
1,5
1,5
1,5
100,0
100,0
100,0
20
Portugal
Percentagem (%)
2003
2009
Total
70,5
70,4
70,4
12,8
13,7
13,2
12,6
12,8
12,7
4,1
3,2
3,7
100,0
100,0
100,0
25
Fonte: PISA 2003 e 2009.
Nota: Para Portugal, o CITE 1 equivale ao 1 e 2 ciclos em conjunto e o CITE 2 ao 3 ciclo. Para
os restantes pases europeus, o nmero de anos de escolaridade em cada nvel CITE difere (ver
Eurydice, 2013).
idade do aluno fixa (ver Cooley et al. (2011) e Schwerdt e West (2012)
para uma discusso mais detalhada sobre as duas abordagens). Tal
contrasta com a maioria dos estudos nesta rea cuja amostra est
confinada ao mesmo grau de escolaridade.
Quadro 2. Pontuaes nos testes em funo da repetncia - mdia e desvio-padro
Total
No-repetentes
Repetentes apenas no ISCED 1
Repetentes apenas no ISCED 2
Repetentes no ISCED 1 e ISCED 2
Total
Matemtica
508.4
(87.9)
418.0
(81.6)
448.5
(83.5)
378.8
(81.1)
497.6
(91.5)
Portugal
Leitura
505.0
(86.4)
411.2
(83.6)
442.1
(86.5)
373.4
(86.3)
493.7
(91.0)
Matemtica
512.6
(71.2)
396.6
(60.8)
426.2
(59.6)
372.7
(55.4)
481.2
(84.1)
Leitura
520.7
(65.7)
406.4
(66.8)
428.7
(63.0)
371.0
(64.3)
488.4
(82.9)
Nota: Este quadro apresenta as mdias das pontuaes dos testes e entre parntesis os desviospadro.
51
O estudo do impacto sobre o desempenho para este grupo de estudantes requereria uma
abordagem metodolgica um pouco diferente, designadamente efeitos de tratamentos mltiplos.
52
Portugal
ISCED 2
Total
Portugal
Variveis individuais
Gnero feminino (b)
Pr-primria 1 ano (b)
Pr-primria 2 anos ou mais (b)
Idade de entrada
Entrada tardia
Maturidade
-0,009
(0.001)***
-0,002
(0.002)
-0,014
(0.002)***
-0,008
(0.002)***
0,021
(0.002)***
-0,003
(0.000)***
-0,034
(0.007)***
0,003
(0.011)
-0,008
(0.009)
0,039
(0.023)*
-0,007
(0.001)***
-0,026
(0.002)***
-0,004
(0.003)
-0,011
(0.003)***
-0,028
(0.003)***
0,008
(0.004)*
-0,002
(0.000)***
-0,044
(0.007)***
0,016
(0.012)
0,012
(0.009)
-0,012
(0.019)
-0,006
(0.001)***
-0,011
(0.001)***
-0,015
(0.001)***
0,000
(0.002)
-0,010
(0.002)***
-0,011
(0.002)***
0,008
(0.002)***
0,019
(0.006)***
0,018
(0.003)***
-0,007
(0.001)***
0,004
(0.003)
-0,005
(0.000)***
-0,007
(0.001)***
-0,013
(0.001)***
-0,044
(0.009)***
-0,046
(0.011)***
-0,023
(0.009)**
-0,033
(0.009)***
-0,023
(0.011)**
0,033
(0.012)***
0,000
[0.027]
-0,063
(0.012)***
0,089
(0.058)
-0,017
(0.005)***
-0,015
(0.008)*
-0,04
(0.011)***
-0,013
(0.002)***
-0,019
(0.002)***
-0,002
(0.003)
-0,009
(0.003)***
-0,015
(0.003)***
0,023
(0.003)***
0,027
(0.008)***
0,014
(0.004)***
0,002
(0.004)
0,002
(0.005)
-0,007
(0.001)***
-0,002
(0.002)
-0,006
(0.002)***
-0,015
(0.008)*
-0,032
(0.010)***
0,002
(0.009)
-0,014
(0.009)
-0,027
(0.010)***
0,027
(0.012)**
0,004
(0.024)
0,015
(0.021)
0,033
(0.035)
-0,009
(0.004)**
-0,002
(0.008)
-0,022
(0.009)**
-0,024
(0.013)*
-0,016
(0.017)
-0,018
(0.022)
-0,064
(0.020)***
-0,054
(0.021)***
0,057
(0.013)***
0,065
(0.033)*
0,01
(0.016)
-0,012
(0.004)***
-0,011
(0.014)
-0,04
(0.014)***
-0,235
(0.133)*
-0,503
(0.225)**
0,172
(0.137)
-0,048
(0.140)
0,098
(0.152)
0,615
(0.189)***
0,412
(0.266)
0,3
(0.155)*
-0,132
(0.050)***
0,033
(0.129)
-0,271
(0.141)*
0,000
(0.011)
0,002
(0.014)
0,004
(0.021)
0,002
(0.017)
-0,033
(0.018)*
0,044
(0.014)***
0,079
(0.038)**
0,036
(0.012)***
-0,010
(0.004)**
0,004
[0.013]
-0,010
[0.012]
-0,280
(0.090)***
-0,360
(0.133)***
0,094
(0.101)
0,010
(0.096)
0,192
(0.104)*
0,261
(0.112)**
0,214
(0.199)
-0,053
(0.131)
-0,152
(0.035)***
0,009
(0.090)
-0,109
(0.091)
Variveis de escola
Variveis regionais
Efeito-fixo de ano
Efeitos-fixos de pas
Variveis de escola
Variveis regionais
Efeito-fixo de ano
-
236666
8619
Variveis de famlia
Livros em casa (25-200) (b)
Livros em casa (>200) (b)
Educao secundria inferior (b)
Educao secundria superior (b)
Educao terciria (b)
Famlia monoparental (b)
Sem pais em casa (b)
Imigrante (b)
Lingua falada em casa diferente da ling. do teste (b)
Lingua estrangeira em casa (b)
Recursos educativos em casa
Ocupao intelectual - no especializada (b)
Ocupao intelectual - especializada (b)
Nmero de alunos
233935
8620
53
-74.3
-76.5
-73.9
(6.2)***
(6.5)***
(6.6)***
ISCED 2
Matemtica
-83.4
-87.9
-82.6
(6.0)***
(5.9)***
(6.5)***
Leitura
-15.7
15.7
-21.4
(4.9)***
(5.3)***
(5.3)***
Matemtica
-21.4
14.0
-27.8
(4.7)***
(5.1)***
(5.1)***
57
Grfico 2B. Distribuio dos efeitos da reprovao no CITE 2 para os repetentes (ATET)
e os no repetentes (ATENT) em Portugal, pontuaes em leitura
58
Esta perceo por parte dos professores sobre possveis efeitos benficos da repetncia abrange
tipicamente a educao pr-escolar e os graus iniciais da educao bsica.
59
do que numa fase mais tardia. Recorde-se, por exemplo, que nos graus
iniciais do CITE 1 tal deciso se baseia principalmente na apreciao de
um s professor.
No que se refere reprovao no CITE 2, as estimativas apresentadas no
quadro 4 indicam um efeito positivo de pequena magnitude sobre o
desempenho em Portugal. Neste ponto, os nossos resultados esto em
linha com estudos recentes como por exemplo, Gary-Bobo et al. (2014)
para a Frana e Baert et al. (2013) para a Blgica. Literatura mais antiga,
como o caso de Hagborg et al. (1991) tendia a encontrar efeitos
particularmente negativos da repetncia numa fase tardia). Por outro lado,
as provas do PISA so realizadas em torno do final do CITE 2, pelo que
neste caso a reteno precede o momento de realizao do teste entre 1 e 3
anos. Assim, na interpretao destes resultados no se pode afastar a
hiptese de os efeitos positivos da reprovao escolar se limitarem aos
anos imediatamente posteriores ao tratamento. Existem diversos estudos
que concluram que os ganhos da repetncia em termos do desempenho
esto confinados ao curto-prazo (por exemplo, Mantzicopoulos et al.,
1992, e Roderick e Nagaoka, 2005). O PISA avalia a utilizao dos
conhecimentos escolares, no como um teste formal s matrias estudadas,
mas do ponto de vista prtico. Tal sugere a possibilidade de persistncia
nos ganhos do tratamento, apesar de no ser possvel tirar concluses
firmes relativamente a este ponto.
62
64
Grfico 4B. Distribuio dos efeitos da reprovao no CITE 2 segundo a situao dos
repetentes em termos de coabitao com os pais, pontuaes em leitura
Baenen, N. R. (1988). Perspectives after five years Has grade retention passed or
failed? [Comunicao apresentada em] The Annual Meeting of the American
Educational Research Association, New Orleans, LA.
Baert, S., Cockx, B. & Picchio, M. (2013). On Track Mobility, Grade Retention and
Secondary School Completion. Ghent University [texto no publicado].
Blundell, R. & Costa-Dias, M. (2009). Alternative Approaches to Evaluation in
Empirical Microeconomics. Journal of Human Resources, 44 (3), pp.565-640.
Cooley, J., Navarro, S. & Takakashi, Y. (2011). How the Timing of Grade Retention
Affects Outcomes: Identification and Estimation of Time-Varying Treatment Effects.
Centre for Human Capital and Productivity Working Papers 20117, University of
Western Ontario.
Diris, R. (2012). Estimating the Impact of Grade Retention: A Heterogenous Analysis.
[texto no publicado].
Elodie, A. (2009). Is grade repetition a second chance? Toulouse School of Economics
[texto no publicado].
65
66
67
Equipa de investigao: Cludia S. Sarrico (coord.), Pedro N. Teixeira, Maria Joo Pires da Rosa,
Margarida F. Cardoso, Carla S, Isabel Machado, Carolina Costa Desempenho das Escolas
Portuguesas Que Fatores fazem a diferena?, Centro de Investigao de Polticas do Ensino
Superior, Programa: PO Assistncia Tcnica FSE (QREN), Projeto nmero: 622.402.013, de
01/01/2013 a 31/12/2014.
68
Investigador principal: Cludia S. Sarrico, Equipa de investigao: Cludia S. Sarrico, Maria Joo
Pires da Rosa, Teresa Fidlis, Consultores: Pedro Saraiva, Jlio Pedrosa, Zoe Radnor, Robert
Dyson, Desenvolvimento de um modelo de medio de desempenho de escolas secundrias
portuguesas, Universidade de Aveiro. Financiado pela Fundao para a Cincia e Tecnologia,
Projeto POCI/EGE/58611/2004, de 01/07/2005 a 30/11/2008.
8
Investigador principal: Cludia S. Sarrico, Equipa de investigao: Cludia S. Sarrico, Maria Joo
Pires da Rosa, Margarida F. Cardoso, Consultores: Jlio Pedrosa, Pedro Guedes de Oliveira, Pedro
Saraiva, Zoe Radnor, Sucesso escolar nas escolas secundrias portuguesas: a importncia da
gesto do desempenho, Centro de Investigao de Polticas do Ensino Superior. Financiado pela
Fundao para a Cincia e Tecnologia, Projeto FSE/CED/83520/2008, de 01/10/2009 a 30/09/2010.
69
SARRICO CS, ROSA MJ (2009). Measuring and Comparing the Performance of Portuguese
Secondary Schools: A Confrontation between Metric and Practice Benchmarking. International
Journal of Productivity and Performance Management 58:8, 767-786.
72
73
74
75
76
77
79
Esta investigao foi apoiada pela Fundao para a Cincia e Tecnologia (contratos
FSE/CED/83617/2008 e PTDC/CPE-PEC/121238/2010) e pelo Instituto de Educao da
Universidade de Lisboa.
81
82
Brasil
Macau
Espanha
Panam
ISCED 1
78.2
76.1
76.9
--
--
ISCED 2
79.6
73.0
--
73.0
73.2
83
Brasil
Macau
(+ Cinco)*
ISCED 1
76.7
(77.8)
(77.0)
--
ISCED 2
80.2
79.8
--
(<80.2)
84
Um problema recorrente nas anlises comparativas dos dados do PISA que, embora
consideremos variveis iguais, o significado dessas variveis pode variar de pas para pas.
Neste caso especfico, notamos que, entre os participantes PISA, o ano escolar normal previsto
para um aluno de 15 anos pode ser, dependendo do pas, o 9., 10. ou 11. ano.
85
86
Os valores globais relatados pelo PISA 2012 para Portugal revelam uma
certa estabilizao aps o grande salto de 2009. Analisando os resultados
para o teste de Leitura em funo do nmero de retenes (Figura 2,
linhas slidas), observa-se uma aproximao das pontuaes entre os
alunos retidos, mas continua a notar-se uma vantagem para os alunos
portugueses que nunca foram retidos no 1. ciclo.
Os resultados dessa analise para a Cincia e Matemtica so semelhantes.
Os sobreviventes do nosso sistema educacional tm sucesso nos testes do
PISA; os deixados para trs porque continuam a ser
proporcionalmente muitos fazem descer os valores relatados pela
OCDE.
87
Lngua
Escola
Rendimento
V*
2009
V*
31.5%
2012
Rapariga
32.2%
Rapaz
45.5%
Portugus
38.2%
Outra
65.0%
Pblico
41.1%
Privado
27.8%
< mil
66.1%
52.0%
38.3%
1 a 15 mil
43.2%
40.6%
39.8%
15 a 20
27.8%
32.7%
36.7%
20 a 25
23.2%
29.5%
36.1%
25 a 30
19.6%
25.3%
42.0%
> 30 mil
13.1%
.116
42.9%
32.8%
.118
36.7%
.079
52.4%
.320
25.5%
10.4%
43.0%
.105
37.2%
.041
39.0%
.088
V*
48.8%
.036
40.8%
.095
.323
12.4%
37.9%
.179
.034
88
90
91
Recomendo que, em futuras bases de dados, se faa a incluso de informao sobre a idade, em
meses, no momento do ingresso. Pode ser difcil para o PISA obter essa informao, mas para o
Ministrio deve ser uma prioridade.
92
of primary education postponed. However, the number of pupils who have fallen
behind at the end of primary education is very high () a considerable percentage
of pupils must repeat a year at least once during their primary schooling. ()
according to 2009 PISA data, these same six countries show the highest
proportion of repeaters at primary level among the participating European
countries (...). (EC/ EACEA/ Eurydice, 2011, pp. 38-39)
Uma Vez
Duas ou Mais
Dez. 1996
74.0
22.3
3.7
Jan. 1997
85.9
11.7
2.5
Dez. 1996
76.1
22.0
2.0
Jan. 1997
90.2
8.7
1.1
1 Ciclo
2 Ciclo
95
CONBOY, J. (2013, dezembro). O que nos diz o PISA sobre reteno; O que a reteno
nos diz sobre o PISA. Comunicao no Encontro PISA 2012- Divulgao dos
Resultados Nacionais: Desafios para a Investigao em Educao. Caparide,
Portugal, 11 de dezembro.
CONBOY, J. (2011). Retention and science performance in Portugal as evidenced by
PISA. Procedia Social and Behavioral Sciences, 12, 311-321.
CONBOY, J., Moreira, I., Santos, I., & Fonseca, J. (2013). Prticas e consequncias da
reteno escolar: Alguns dados do PISA. In L. Veloso & P. Abrantes (Org.),
Sucesso escolar: Da compreenso do fenmeno s estratgias para o alcanar
(pp. 9-27). Lisboa: Mundossociais.
EC/EACEA/Eurydice. (2011). Grade retention during compulsory education in Europe:
Regulations and statistics. Brussels: Author. doi:10.2797/50570.
MOREIRA, I., Santos, I. & Conboy, J. (2012). A reteno acadmica e performance a
cincias
em
Portugal
evidenciadas
no
PISA
2006.
http://repositorio.ul.pt/bitstream/10451/7782/1/Moreira%20Santos%20Conboy%2
02010.pdf.
96
97
Este estudo evidenciou que o gnero tem um impacto positivo (os rapazes
(Male na Figura 1) apresentam melhores resultados) e aproximadamente
constante para os vrios quantis de desempenho. A condio de imigrante
do aluno (IMI na Figura 1) leva a que este obtenha piores resultados,
sendo esta condio mais penalizadora para alunos nos quantis de
desempenho mais baixos. O grau frequentado pelo aluno tem um grande
impacto nos resultados sendo este impacto positivo para os alunos que
frequentam o secundrio (secondary educ. (general) na Figura 1) e
98
99
Tendo concludo que escola frequentada tem impacto nos resultados dos
alunos, analisamos possveis fatores explicativos desse impacto atravs de
um modelo de regresso linear onde as variveis dependentes
consideradas foram os efeitos escola para cada quartil. Deste modelo
resultaram apenas dois fatores estatisticamente significativos na
explicao do efeito escola: localizao da escola e sua dimenso (nmero
101
GERACI, M. & BOTTAI, M. (2014) Linear quantile mixed models. Statistics and
Computing 24 (3), 461-479.
RAUDENBUSH, S.W. & BRYK, A.S. (2002) Hierarchical Linear Models (Second
Edition), Thousand Oaks, Sage Publications.
102
Este trabalho foi inicialmente preparado para apresentar no Seminrio sobre Investigao em
Educao e os Resultados do PISA, organizado pelo Conselho Nacional de Educao (CNE) e
realizado no dia 5 de Dezembro de 2014 na sua sede. Alguns dos resultados estatsticos preparados
para o Seminrio foram apresentados como preliminares e no foram objeto de discusso no
Seminrio, uma vez que a publicao do relatrio tcnico do PISA 2012 (OECD, 2014c) aconteceu
no mesmo dia e, portanto, no foi possvel confirmar alguns aspetos tcnicos. Como tal, no so
includos neste captulo. Em data posterior do Seminrio, esse material de investigao foi
reanalisado luz do relatrio tcnico e submetido para publicao. O artigo resultante tem a
seguinte referncia: Ferro, M.E. (2015). Tpicos sobre reteno em Portugal atravs do PISA.
Education Policy Analysis Archives [Arquivos Analticos de Polticas Educativas], 23(X). no prelo.
2
De acordo com o glossrio de conceitos para fins estatsticos das reas temticas Educao e
Formao, Reteno consiste na manuteno do aluno abrangido pela escolaridade obrigatria,
no ano letivo seguinte, no mesmo ano de escolaridade que frequenta, por razes de insucesso ou
por ter ultrapassado o limite de faltas injustificadas.
104
dados do PISA 2012 (cf. Tabela 2). Tambm se verificou melhoria nos
resultados dos alunos que haviam sido retidos. Em sntese, as estimativas
apresentadas naquele trabalho sugerem que a reduo da taxa de reteno
entre 2000 e 2006, aconteceu sem a deteriorao dos resultados de
desempenho nos testes padronizados. Assim sendo, a ocorrncia
simultnea dos dois fenmenos, pe em causa a defesa da reteno como
sendo a soluo educativa que garante a qualidade da educao.
Dada a relevncia do tema reteno escolar tanto na perspetiva da
avaliao de desempenho do sistema educativo, bem como na perspetiva
da dimenso social, pareceu-me que a circunstncia deste Seminrio
propiciava o regresso ao tema.
De acordo com o glossrio de conceitos para fins estatsticos das reas temticas Educao e
Formao, Sada Antecipada (Early school leaving) consiste na situao dos indivduos, num
escalo etrio (normalmente entre os 18-24 anos), que no concluram o 3. ciclo do ensino bsico e
no se encontram a frequentar a escola.
106
No mbito deste trabalho, define-se reteno precoce aquela que ocorre em qualquer dos anos
de escolaridade que integram o nvel ISCED 1 e reteno tardia aquela que ocorre em qualquer
dos anos de escolaridade que integram o nvel ISCED 2.
107
108
Autoconceito
em Matemtica
Zscore:
HISEI
96034
0
62243
33791
91588
4446
Mdia
Desvio padro
15.75
0.29
-0.10
0.93
0.00
1.00
Quartis
15.50
15.75
16.00
-0.52
-0.06
0.41
-0.82
-0.29
0.72
Casos vlidos
Resposta omissa
25
50
75
109
Tudo indica que as anlises que tm sido feitas com estas variveis pelo consrcio PISA, tais
como as que constam do relatrio (OECD, 2013) consideram os valores omissos por planeamento
como sendo completamente aleatrios.
7
Estatsticas descritivas obtidas a partir das variveis Plausible values in math 1 (PV1MATH),
Plausible values in reading 1 (PV1READ), Plausible values in science 1 (PV1SCIE), com peso
amostral W_FSTUWT. As estimativas obtidas com as restantes variveis resultantes do processo
de imputao mltipla (PV*MATH, PV*READ, PV*SCIE) confirmam a afirmao.
110
2006
2009
2012
Mdia
519.4
531.09
535.25
Desvio padro
68.77
73.52
73.31
0.13
0.14
0.14
Mdia
531.23
532.24
534.75
Desvio padro
69.39
66.58
69.77
Coeficiente de variao
Leitura
Coeficiente de variao
Cincias
0.13
0.13
0.13
527
531.27
532.28
Desvio padro
66.69
68.56
69.42
Coeficiente de variao
0.13
0.13
0.13
Mdia
111
No
Sim
Total
No
0.95
0.05
1.00
Sim
0.49
0.51
1.00
9. decil
[2]
Razo de probabilidades
[1]/[2]
Reteno
0.593
0.053
11.19
0.496
0.014
35.43
0.329
0.042
7.83
Probabilidade
113
Paris:
UNESCO.
Retrieved
from
115
116
Klein, R., & Ribeiro, S. C. (1991). O censo educacional e o modelo de fluxo: o problema
da repetncia. Revista Brasileira de Estatstica, 52(197/198), 545.
Little, R. J. A., & Rubin, D. B. (2002). Statistical analysis with missing data (2nd ed.).
New Jersey: John Wiley & Sons Inc.
Lyche, C. S. (2010). Taking on the completion challenge: a literature review on policies
to prevent dropout and early school leaving. OECD Education Working Papers, 53.
Ministrio da Educao. Decreto-Lei no213/2006, Dirio da Repblica, 1asrie - no208
(2006).
Ministrio da Educao. Decreto-Lei no88/2007, Dirio da Repblica, 1a srie, no63
(2007).
Montmarquette, C., Viennot-Briot, N., & Dagenais, M. (2007). Dropout, school
performance, and working while in School. Review of Economics and Statistics,
89(4), 752760. doi:10.1162/rest.89.4.752.
OECD. (2008). Growing unequal?: Income distribution and poverty in OECD Countries.
doi:10.1787/9789264044197-en.
OECD. (2013). PISA 2012 Results: Ready to learn: Students engagement, drive and selfbeliefs (vol. III). Paris. Retrieved from http://dx.doi.org/10.1787/9789264201170en.
OECD. (2014a). PISA 2012 Results: what students know and can do student
performance in Mathematics, Reading and Science (vol.I, Revised edition, February
2014). Paris. Retrieved from http://dx.doi.org/10.1787/9789264201118-en.
OECD. (2014b). PISA 2012 Technical Report.
OECD. (2014c). PISA 2012 Technical report Programme for International Student
Assessment
(December
2014).
Paris.
Retrieved
from
http://www.oecd.org/pisa/pisaproducts/PISA-2012-technical-report-final.pdf.
Paul, J. (1997). Le redoublement lcole: Une maladie universelle? International
Review of Education, 43(5-6), 611627.
Roderick, M. (1994). Grade retention and school dropout: Investigating the association.
American
Educational
Research
Journal,
31(4),
729759.
doi:10.3102/00028312031004729.
The Council of the European Union. (2011). Council Recommendation on policies to
reduce early school leaving. Official Journal of the European Union, C 191, 16.
Retrieved
from
http://localeducation.eu/Portals/EducationalSystems/Council_
recommendation.pdf.
117
119
121
que algo que valeria a pena considerar como pista de reflexo para o
prximo seminrio.
Por fim, fiquei muito impressionado com o facto aqui demonstrado: os
resultados so melhores do que parecem, ou seja, contextualizando,
considerando vrias perspetivas, a progresso dos resultados portugueses
neste estudo internacional ser melhor do que aquilo que os dados
sintticos deixam revelar. Os resultados so melhores do que aquilo que o
pas merece. O que pretendo dizer com isto? Estando perto da mdia da
OCDE nos resultados PISA, a pergunta : em quantos outros indicadores
de desenvolvimento econmico e social que estamos na mdia da
OCDE? Assim, alguns dos comentrios feitos pelo Professor Conboy
relativamente ao sistema de ensino so um bom ponto de reflexo.
Andamos sempre a afirmar que o sistema de ensino mau, porque
funciona mal, mas, analisados os resultados, o sistema no to mau
quanto parece. Portanto, alguma ponderao sobre o efeito do sistema de
ensino sobre os resultados aconselhvel. Por outro lado, importante
no esquecer que, se o sistema no to mau quanto parece, tem, ainda
assim, alguns aspetos em que podemos claramente fazer melhor. o caso,
que hoje ficou evidente, da reteno. Nesse aspeto a dimenso seletiva do
sistema muito forte, com impacto, naturalmente, na seletividade
educativa e, tambm, na seletividade social. E isto no s um problema
de ineficincia, um problema de ineficcia, porque a escola no se fez
para selecionar, a escola fez-se para integrar, para promover o capital
humano, o saber, a dimenso humana na formao das pessoas. Julgo que
o que foi aqui apresentado, nomeadamente sobre a reteno, o conceito
mais repetido, nos deve dar algum alento para voltarmos a pegar neste
assunto e tentarmos discutir algumas das solues que outros pases j
tiveram de encontrar e at de algumas escolas que em Portugal j as
adotaram. Vale a pena refletir e tentarmos observar como que tm vindo
a encarar a reteno. Complementarmente, importante olharmos para o
facto de as retenes se registarem fundamentalmente aps a transio
entre ciclos. Parece que temos um sistema educativo em escala cada vez
que terminamos um ciclo temos de dar um salto, temos de passar para o
degrau seguinte. A questo que a capacidade de educao fsica dos
122
123