Contexto escolar e indicadores educacionais: condies

desiguais para a efetivao de uma poltica de avaliao

educacionalI

Maria Teresa Gonzaga AlvesII

Jos Francisco SoaresII

Resumo

A introduo do ndice de Desenvolvimento da Educao Bsica

(Ideb) pelo governo federal representou uma mudana significativa
na forma como a educao passou a ser acompanhada no Brasil. O
Ideb o indicador de qualidade desenvolvido para avaliar a educa-
o oferecida no pas e em cada unidade da federao, municpio
e escola pblica. Ele serve tambm para acompanhar a melhoria
da qualidade educacional segundo metas preestabelecidas. Seu uso
para essas finalidades tem suscitado debates sobre o tipo de polti-
ca de responsabilizao que o indicador engendra. Argumenta-se,
neste artigo, que o Ideb coloca foco em resultados finalsticos, sem
considerar as condies que propiciam a obteno de tais resul-
tados. O trabalho analisa a relao entre o indicador e o contexto
escolar, considerando para tal o perfil de seus alunos e as carac-
tersticas do estabelecimento de ensino. A anlise emprica utiliza
dados da Prova Brasil, do Censo Escolar e do prprio Ideb, por meio
de modelos de regresso linear mltipla. Os resultados mostram que
as escolas que atendem a alunos de menor nvel socioeconmico,
como esperado, tm piores resultados, mesmo com o controle de
outras caractersticas. Para essas escolas, muito mais difcil elevar
o valor do indicador. Alm disso, as condies de infraestrutura e
de complexidade da instituio tambm guardam relao com o
Ideb. Por fim, os resultados indicam que so necessrias polticas
de superao dessas limitaes e que tais condies no podem ser
ignoradas na anlise do Ideb.

Palavras-chave

Avaliao educacional Contexto escolar Ensino fundamental.

I- Os autores agradecem ao Conselho Nacional

de Desenvolvimento Cientfico e Tecnolgico
(CNPq) o auxlio concedido pesquisa, o qual
possibilitou este artigo.
II- Universidade Federal de Minas Gerais,
Belo Horizonte, MG, Brasil.
Contatos: mtga@ufmg.br;
francisco-soares@ufmg.br

Educ. Pesqui., So Paulo, v. 39, n. 1, p. 177-194, jan./mar. 2013. 177

School context and educational indicators: unequal
conditions for the implementation of an education assessment
policy I

Maria Teresa Gonzaga AlvesII

Jos Francisco SoaresII

Abstract

The introduction by the federal government of the Basic Education

Development Index (Ideb in the Portuguese acronym for ndice de
Desenvolvimento da Educao Bsica) represented a significant
change in the way in which education is followed in Brazil. Ideb
is the quality indicator developed to evaluate the education offered
in this country and by each unit of the Federation, municipality,
and public school. It also allows following the improvement in the
quality of education according to preestablished goals. Its use for
these purposes has been fuelling debates about the kind of policy of
accountability that the indicator creates. It is argued in this article
that Ideb puts focus on end results, without taking into account
the conditions that have contributed to obtaining such results. The
work analyzes the relations between this indicator and the school
context, considering the profile of the pupils and the characteristics
of the teaching institution. The empirical study makes use of data
from the Prova Brasil, from the School Census and from Ideb itself
through models of multiple linear regression. The results show that
the schools that cater for pupils of a less privileged socioeconomic
background exhibit, as expected, poorer results even when controlled
for other features. These schools find it much more difficult to elevate
the value of the indicator. Besides, infrastructure conditions and the
complexity of the institutions are also correlated with Ideb. Lastly,
the results indicate that there is a need for policies to overcome
these limitations and that these conditions cannot be ignored in the
analysis of the Ideb.

Keywords

Educational assessment School context Fundamental education.

I- The authors acknowledge the support of

the Brazilian National Council of Scientific and
Technological Development (CNPq), which made
this article possible.
II- Universidade Federal de Minas Gerais, Belo
Horizonte, MG, Brasil.
Contatos: mtga@ufmg.br;
francisco-soares@ufmg.br

178 Educ. Pesqui., So Paulo, v. 39, n. 1, p. 177-194, jan./mar. 2013.

 Este trabalho analisa a relao entre
o contexto escolar descrito pelo perfil dos
alunos e pelas caractersticas da escola e a
qualidade educacional aferida pelo ndice de
Desenvolvimento da Educao Bsica (Ideb).
Esse indicador foi introduzido na poltica educa-
cional pelo Plano de Metas Compromisso Todos
pela Educao (BRASIL, 2007). Ele calculado,
a cada dois anos, pelo Instituto Nacional de
Estudos e Pesquisas Educacionais Ansio Teixeira
(Inep) do Ministrio da Educao (MEC), com-
binando dados de rendimento escolar obtidos
pelo Censo Escolar com dados do desempenho
dos alunos nas avaliaes externas nacionais.
Por meio do Ideb, o governo sinaliza para toda
a sociedade que um sistema de ensino, para ter
qualidade, deve garantir o aprendizado de seus
alunos com uma trajetria educacional regular,
sem reprovaes (FERNANDES, 2007).
A introduo do Ideb se deu a partir da
hiptese de que professores, diretores e gestores
educacionais reagiriam a cobranas de resulta-
dos por parte da sociedade, melhorando a efi-
ccia de seus processos internos e, consequen-
temente, a qualidade do ensino (FERNANDES;
GREMAUD, 2009). Contudo, tal hiptese no
leva em conta o fato de que os resultados es-
colares so fortemente associados origem
social e cultural dos alunos matriculados nas
escolas (COLEMAN et al., 1966; BOURDIEU;
PASSERON, 2008). Estudos educacionais mos-
tram, tambm, que a melhoria no nvel de de-
sempenho dos alunos pode ser obtida ao custo
do aumento da desigualdade entre grupos de
alunos dentro das mesmas escolas (BRYK; LEE,
1989; FRANCO et al., 2007). Ou seja, prticas
que melhoram a qualidade educacional mdia
de um estabelecimento de ensino podem ter
como efeito perverso o aumento da desigual-
dade entre alunos discriminados por raa/cor,
gnero e outras variveis sociodemogrficas
(SOARES; ALVES, 2003).
O presente trabalho aborda a complexa
relao entre o valor do Ideb da escola e suas
caractersticas contextuais definidas pelo per-
fil de seus alunos e pelas condies da oferta
Educ. Pesqui., So Paulo, v. 39, n. 1, p. 177-194, jan./mar. 2013.
escolar. Para tanto, faz uso dos dados da Prova
Brasil, do Censo Escolar e do Ideb referentes
s escolas pblicas de ensino fundamental de
todo o Brasil que possuem essas informaes
divulgadas pelo Inep. O texto est estrutura-
do em quatro partes, alm desta introduo.
Inicialmente, ser feita uma breve reviso so-
bre estudos anteriores a respeito das avaliaes
educacionais que culminaram com a introdu-
o do Ideb, e sobre a presena desse indicador
na pesquisa educacional recente. Na abordagem
analtica, ser exposto o modelo conceitual e
sua operacionalizao emprica. Em seguida,
sero apresentados os resultados, os quais sero
sumarizados e discutidos na ltima seo.
Estudos anteriores
As avaliaes educacionais externas
em larga escala so uma realidade no pas
desde a dcada de 1990, com a implantao
do Sistema de Avaliao da Educao Bsica
(Saeb) pelo Inep.1 A consolidao do Saeb em
nvel nacional possibilitou que os sistemas de
ensino pudessem ser avaliados e comparados
quanto ao aprendizado de seus alunos, e no
apenas quanto capacidade de atendimen-
to por meio da expanso da rede de ensino
(OLIVEIRA; ARAJO, 2005). Assim, os resulta-
dos do Sistema, divulgados bianualmente at a
edio de 2005, propiciaram a produo de um
rico diagnstico sobre a qualidade da educao
ofertada pelas escolas brasileiras segundo gran-
des unidades amostrais: regies, Estados, redes
de ensino, dependncias administrativas e lo-
calizaes urbanas ou rurais. Eles subsidiaram
tambm o desenvolvimento de pesquisas at
ento raras no pas sobre o efeito das esco-
las e os fatores associados eficcia do ensino
(ALVES; FRANCO, 2008). Entretanto, apesar do
grande esforo para a disseminao desses re-
sultados por parte do Inep e do MEC, no havia
muita repercusso do Saeb nos municpios e nas
1- No nosso objetivo fazer uma reviso da literatura sobre os sistemas de
avaliao, tema amplamente coberto pela literatura especializada. Citam-se,
por exemplo, Bonamino e Franco (1999) e Bonamino e Sousa (2012).
179
escolas que forneciam as informaes primrias
por meio de seus alunos, porque eles no eram
representados como unidades isoladas na ava-
liao nacional (COTTA, 2001).
Tal cenrio mudou com a reestruturao
do Saeb a partir de 2005, quando o Sistema
passou a ser composto por duas avaliaes
externas: a Avaliao Nacional da Educao
Bsica (Aneb), que manteve basicamente as
mesmas caractersticas da avaliao amostral
realizada at 2003; e a Avaliao Nacional do
Rendimento Escolar (Anresc), conhecida como
Prova Brasil, que avalia as escolas pblicas
de forma quase censitria. Essa ltima passou
a contemplar nominalmente os resultados dos
estabelecimentos de ensino e dos municpios.
Antes, apenas os Estados e alguns poucos mu-
nicpios que j haviam desenvolvidos seus sis-
temas prprios de avaliao como em So
Paulo, no Rio de Janeiro, em Minas Gerais, no
Cear e em mais alguns outros conheciam o
desempenho mdio dos alunos matriculados
nas escolas de suas respectivas redes de ensino.
Em 2007, introduziu-se outra novidade
importante no uso das avaliaes externas na-
cionais. Os resultados do Saeb e da Prova Brasil,
em conjunto com uma medida de rendimento
fornecida pelo Censo Escolar, foram sintetiza-
dos no Ideb. Esse novo indicador calculado
para os anos iniciais do ensino fundamental, os
anos finais do ensino fundamental e o ensino
mdio foi criado para medir de forma objetiva
a qualidade da educao bsica, conforme os
termos do Decreto no 6.094, que o introduziu:
Art.3 - A qualidade da educao bsica ser
aferida, objetivamente, com base no Ideb,
calculado e divulgado periodicamente pelo
Inep, a partir dos dados sobre rendimento
escolar, combinados com o desempenho
dos alunos, constantes do censo escolar
e do Sistema de Avaliao da Educao
Bsica - Saeb, composto pela Avaliao
Nacional da Educao Bsica - Aneb e a
Avaliao Nacional do Rendimento Escolar
(Prova Brasil).
180 Maria Teresa Gonzaga ALVES; Jos Francisco SOARES. Contexto escolar e indicadores educacionais: condies...
Pargrafonico. O Ideb ser o indicador
objetivo para a verificao do cumprimento
de metas fixadas no termo de adeso
ao Compromisso. (BRASIL, 2007, grifos
nossos)
Para Reynaldo Fernandes (2007, p. 8),
Presidente do Inep na gesto que introduziu o
Ideb, o indicador
possui a vantagem de ser de fcil
compreenso, simples de calcular, aplicvel
s escolas e explcito em relao taxa de
troca entre probabilidade de aprovao e
proficincia dos estudantes.
Em um nico nmero, expresso na esca-
la de zero a 10, ele traduz a qualidade da educa-
o e permite comparar as unidades avaliadas
escolas, redes e sistemas estaduais e municipais
de ensino , bem como acompanhar a evoluo
do indicador ao longo do tempo. De acordo
com o governo federal, o Ideb assume o papel
de indutor de polticas para melhoria da edu-
cao, por meio de termo de adeso voluntria
dos municpios e Estados ao Plano de Metas
Compromisso Todos pela Educao. As metas
desse plano visam a que Estados, municpios e
escolas contribuam, em conjunto, para que o
Brasil atinja um patamar educacional equiva-
lente ao dos pases desenvolvidos at 2022, ano
do bicentenrio da Independncia. Em termos
numricos, isso significa obter, nos anos iniciais
do ensino fundamental, um Ideb igual a 6,0 na
mdia nacional, tendo como referncia o valor
inicial obtido em 2005, que foi de 3,8.
Desde 2007, quando o Ideb passou a ser
calculado, j foram divulgadas quatro edies,
referentes aos anos de 2005, 2007, 2009 e 2011.
De acordo com os valores das metas do Ideb
publicados pelo Inep, o pas avanou em to-
dos os nveis de ensino. Nos anos iniciais do
ensino fundamental, o Ideb, que era de 3,6 em
2005, ultrapassou as metas criadas para os anos
seguintes (obteve valores de 4,2, 4,6 e 5,0, em
2007, 2009 e 2011, respectivamente). Nos anos
finais do ensino fundamental, sua evoluo foi
menor, mas tambm ultrapassou as metas (va-
lores de 3,5, 3,8, 4,0 e 4,1, respectivamente). J
no ensino mdio, o indicador tambm evoluiu
na mdia, mas de forma bem menos expressiva
do que nos nveis anteriores (3,4, 3,5, 3,6 e 3,7,
respectivamente). Embora aparentemente esses
valores possam ser considerados muito baixos,
vale frisar que os pequenos incrementos obtidos
no perodo representam grandes avanos, devido
s peculiaridades envolvidas no clculo do Ideb.2
A aparente simplicidade do Ideb isto ,
a escala de zero a 10 similar de um boletim
escolar e as metas criadas para cada unidade
avaliada facilitou sua rpida aceitao, espe-
cialmente na imprensa, entre os formuladores
de polticas pblicas e gestores educacionais.
Inegavelmente, o Ideb tornou-se muito influen-
te no debate educacional, haja vista a incluso
do indicador na proposta do Plano Nacional da
Educao (PNE) para o atual decnio (BRASIL,
2010). No longo processo de negociao do PNE
que se arrastou at 2012, a incluso das metas
do Ideb no texto praticamente no foi questio-
nada comparativamente ao intenso debate que
se deu em torno do financiamento da educao.
O Ideb tambm conquistou legitimidade
junto a uma parte do pblico acadmico, ao
mesmo tempo em que recebeu fortes crticas
de pesquisadores. Em geral, seus apoiadores
so da rea da economia e os crticos so de
origem mais educacional, refletindo uma tenso
entre valores muito distintos (ALMEIDA, 2008;
SETUBAL, 2010; SOUSA; OLIVEIRA, 2010). Por
um lado, o Ideb visto como uma modalidade de
accountability (ou responsabilizao) apropriada
ao sistema educacional descentralizado vigente
no pas. Nessa perspectiva, o indicador e suas
metas proporcionariam incentivos para que as
escolas e os gestores se esforcem para melhorar
simultaneamente o desempenho e o rendimento
dos alunos, elevando, assim, a qualidade
educacional (FERNANDES; GREMAUD, 2009).
2- Devido metodologia do clculo do Ideb, seus valores tpicos raramente
ultrapassam os limites abaixo de 3 ou acima de 6, conforme explicado por
Soares (2011).
Educ. Pesqui., So Paulo, v. 39, n. 1, p. 177-194, jan./mar. 2013.
De outro lado, na literatura educacional,
critica-se o Ideb como uma medida de qualidade
da educao e questionam-se suas consequncias
para as escolas. Freitas (2007), por exemplo,
considera o indicador como uma poltica de
responsabilizao unilateral que exclui as escolas
ao mesmo tempo em que as estigmatiza. Para o
autor, o Ideb no referncia de qualidade da
educao, entre vrias razes, porque ele no
reflete a relao custo aluno/qualidade e tambm
no sensvel s desigualdades sociais. De forma
anloga, Sousa e Oliveira (2010) alertam para o
uso do Ideb como uma simplificao a padres
educacionais desejveis de problemas educativos
mais complexos.
A despeito disso, reconhece-se que a
ausncia de consequncias mais duras para as
escolas associadas s metas do Ideb torna o
indicador um tipo de responsabilizao bran-
da (BONAMINO; SOUSA, 2012). A divulgao
de resultados por Estados, municpios e esco-
las, e as metas criadas para cada um deles no
envolvem prmios ou sanes, como ocorre
em alguns Estados e municpios que possuem
sistemas prprios de avaliao por exem-
plo, Cear, Pernambuco e So Paulo (BROOKE;
CUNHA, 2011; FERRAZ, 2009).
Alm das discusses sobre aspectos polti-
co-ideolgicos associados ao Ideb, h uma cres-
cente produo de estudos que analisam os re-
sultados obtidos por municpios ou escolas, bem
como a evoluo do Ideb entre edies, conside-
rando contextos territoriais, diferenas sociais e
econmicas (ERNICA; BATISTA, 2011; GOUVEIA;
SOUZA; TAVARES, 2009; MACHADO-SOARES
et al., 2011; PADILHA et al., 2012).3
O Ideb obtido pelos municpios foi ana-
lisado pela organizao no governamental
Todos Pela Educao (2010), e os resultados des-
qualificam os rankings de municpios segundo
o Ideb, os quais, entretanto, continuam sendo
sistematicamente produzidos e divulgados pela
3- O Ideb aparece em inmeros trabalhos nos encontros da rea, tais como:
Associao Nacional de Ps-Graduao e Pesquisa em Educao (Anped),
Associao Nacional de Poltica e Administrao da Educao (ANPAE) e
Associao Brasileira de Avaliao Educacional (ABAVE).
181
mdia. O estudo mostra que alguns municpios
podem atingir valores de Ideb acima da mdia
nacional, mas com resultados bons apenas para
parte dos alunos matriculados nas melhores
escolas. Ou seja, as disparidades entre escolas
dentro do mesmo municpio e da mesma rede
de ensino no podem ser negligenciadas.
Tambm com foco nos municpios,
Padilha et al. (2012) encontram as piores m-
dias do Ideb principalmente nas metrpoles e
nas cidades do litoral do Nordeste, o que se
explicaria pelos efeitos negativos da segrega-
o urbana no acirramento das desigualdades
educacionais. Entretanto, os autores obser-
vam algumas excees, sobretudo no Estado
do Cear. Tambm ali, Vidal e Vieira (2011)
constatam que o Ideb incondicionalmente
aceito pelos gestores municipais, que o tm
como norteador das polticas municipais de
educao. O Cear possui uma das mais longas
experincias de adoo de poltica de respon-
sabilizao educacional no pas, o que expli-
caria esse comprometimento entre os gestores
do Estado (BROOKE; CUNHA, 2011).
Estudos sobre o prprio Ideb sua com-
posio interna e os fatores que impactam sobre
seu clculo so ainda escassos. Esse tipo de
anlise importante porque o Ideb, assim como
qualquer outro indicador de natureza compos-
ta, exprime modelos que devem ter fundamen-
tao terica e correspondncia com a realidade
emprica. Entretanto, todos os indicadores des-
se tipo encerram certa dose de arbitrariedade
e precisam de tempo e experimentao para
que se possa avaliar sua consistncia. Segundo
Soares (2011), o clculo do Ideb envolve esco-
lhas que implicam consequncias importan-
tes na interpretao de seus valores. Assim, o
equilbrio timo entre desempenho e aprovao
para elevar a mdia do Ideb pode ter como efei-
to perverso o aumento da desigualdade entre
escolas e, principalmente, dentro das escolas,
por meio da segregao de alunos com desem-
penho mais fraco.
O conjunto desses estudos deixa subjacen-
te certa tenso entre resultados e metas propostos
182 Maria Teresa Gonzaga ALVES; Jos Francisco SOARES. Contexto escolar e indicadores educacionais: condies...
pelo Ideb e as condies efetivas para a reali-
zao dessa poltica educacional, bem como os
problemas do prprio indicador. O economista
Amartya Sen (2009) oferece pistas para tratar
desse dilema com a distino entre resultados
finalsticos e resultados globais (culmination
and comprehensive outcomes). O Ideb se asso-
cia ideia de resultados finalsticos, mas no
fazem parte de sua justificativa os processos
por meio dos quais os resultados foram obtidos.
Resultados globais compreenderiam tambm
os processos, os meios. Anlises de resultados
de polticas apenas por indicadores finalsticos
nem sempre se traduzem em efeitos socialmente
justos. Em educao, isso reflete a ausncia de
equidade na anlise das polticas no setor. Um
sistema educacional considerado equitativo
se a distribuio do desempenho dos grupos de
alunos definidos por suas caractersticas sociais,
de gnero ou raciais, por exemplo, equiva-
lente distribuio total dos alunos (SOARES,
2006). A busca pela equidade se traduz em po-
lticas e prticas educacionais que minimizem,
nas escolas, as desigualdades econmicas e so-
ciais existentes entre os alunos (DUBET, 2004).
Impe-se, portanto, a necessidade de
distinguir entre a descrio que o Ideb apresen-
ta sobre a qualidade da educao e a explicao
dos fatores que impactam no resultado sinteti-
zado pelo indicador, principalmente no nvel da
escola. A inteno deste trabalho contribuir
nessa direo.
Abordagem analtica
Como exposto, o objetivo aqui analisar
o Ideb da escola considerando simultaneamente
as condies contextuais, ou seja, o perfil dos
alunos e as caractersticas dos estabelecimen-
tos de ensino. Para estudar essa questo, seja
terica ou empiricamente, preciso explicitar
um modelo conceitual que apresente as vrias
inter-relaes entre os fatores explicativos no
resultado final, isto , o valor do Ideb. Partiu-
se de um estudo anterior (SOARES, 2007) em
que se props um modelo conceitual para o
desempenho do aluno, adaptando-o para a uni-
dade escolar qual se refere o Ideb.
No modelo anterior, assume-se que o de-
sempenho est relacionado s caractersticas de
cada aluno, as quais interagem com as estrutu-
ras em que ele est inserido: a famlia, a escola
e a sociedade. O teste emprico do modelo de-
pende de abordagem multidisciplinar que agre-
gue conhecimentos da psicologia, da educao,
da sociologia, da economia e inclusive da cin-
cia poltica, em muitos momentos subsidiados
pela coleta e pela anlise de dados por meio de
tcnicas estatsticas apropriadas.
Na adaptao do modelo ao problema
desta pesquisa, consideraram-se as dimenses
escolares que pudessem ser aferidas empirica-
mente com os dados disponveis. Assim, a me-
dida do Ideb de cada escola pblica provm do
banco de dados disponibilizado pelo Inep. Os fa-
tores associados aos alunos que potencialmente
influenciam o resultado do Ideb so provenien-
tes de avaliaes em larga escala cujos detalhes
sero descritos a seguir. Foram considerados os
fatores que influem no contexto escolar, confi-
gurando o que a literatura educacional denomi-
na como efeito dos pares (WILLMS; SOMERS,
2001). So eles: o nvel socioeconmico mdio
de cada escola e a proporo de alunos discri-
minados por raa/cor e tambm por gnero.
Dentre os fatores dos alunos, no se le-
vou em conta o atraso escolar mdio dos ma-
triculados, isto , a diferena entre a mdia de
idade em relao ao que seria esperado para a
srie. Normalmente, o atraso escolar deve ser
considerado nos estudos sobre desempenho
escolar devido ao seu efeito deletrio nos re-
sultados; entretanto, tal atraso j est compos-
to no clculo do Ideb, no termo referente ao
rendimento mdio da escola calculado a partir
de suas respectivas taxas de aprovao. Assim,
seria incorreto consider-lo tambm como um
fator explicativo.
Para a caracterizao das escolas, foram
construdos fatores associados aos construtos
tericos, a partir das informaes do Censo
Escolar. So eles: infraestrutura, tamanho e
Educ. Pesqui., So Paulo, v. 39, n. 1, p. 177-194, jan./mar. 2013.
complexidade da escola. Optou-se por desen-
volver tais fatores em vez de se utilizar os itens
especficos para evitar interpretaes de que
caractersticas isoladas das escolas podem ser
reificadas para a melhoria da educao. Os de-
talhes desses fatores sero descritos a seguir.
Optou-se tambm por no incluir fatores
associados aos professores, embora eles faam
parte do modelo conceitual adaptado para este
trabalho. Ocorre que, no Censo Escolar, as in-
formaes sobre professores se referem funo
docente, uma concepo mais abstrata que no
se vincula a apenas uma escola ou uma turma
de alunos. A Prova Brasil possui informaes
mais detalhadas sobre os professores (formao,
experincia e condies de trabalho), coletadas
por meio de questionrio. Contudo, h dificul-
dades para o uso desses dados de forma agre-
gada por escola. Na base de dados, h muitos
questionrios no respondidos, e a ausncia de
informaes reduz os casos vlidos nos mode-
los estatsticos de anlise. Alm disso, o uso de
informaes individuais sobre os professores no
nvel da escola pode gerar problemas de agre-
gao em grau diferente do que ocorre quando
se faz o mesmo com as informaes dos alunos.
Enquanto estes ltimos contam em nmero de
pelo menos uma dezena por escola para se pro-
duzir a mdia de um fator de interesse, no caso
dos professores, as informaes quase sempre
se referem a apenas um ou dois indivduos.
Explicao dos fatores
- Nvel socioeconmico da escola
O contexto socioeconmico das esco-
las o fator mais importante para anlise de
resultados educacionais. Espera-se, portan-
to, que uma escola que atende a alunos com
maior poder aquisitivo e com mais recursos
culturais atinja valores mais altos do Ideb. Tal
fator foi obtido em um estudo externo a este,
cuja finalidade especfica foi produzir uma
medida de nvel socioeconmico mdio para
todas as escolas brasileiras (ALVES; SOARES,
183
2012). Para isso, foram utilizados dados de
vrias pesquisas educacionais realizadas pelo
Inep na educao bsica junto a escolas p-
blicas e privadas. Itens dos questionrios res-
pondidos pelos alunos nessas avaliaes que
guardam relao com o construto terico a
escolaridade e a posio ocupacional dos pais
do aluno e a renda familiar (evidenciada pela
posse de bens, uso de servios e rendimento
de fontes diversas) foram agregados em uma
nica medida do nvel socioeconmico do alu-
no. O processo de agregao foi feito com o
uso de uma tcnica estatstica multivariada
denominada Teoria da Resposta ao Item (TRI),
cujos detalhes esto descritos em um artigo
dedicado ao assunto (ALVES; SOARES, 2009).
Em seguida, o nvel socioeconmico estimado
foi agregado pela mdia do nvel socioecon-
mico dos alunos de cada escola.
- Proporo de alunos discriminados por raa/cor e
por gnero
Estudos com dados das avaliaes em
larga escala mostram que alunos que se de-
claram brancos tm desempenho superior em
comparao aos alunos que se declaram pardos,
pretos, amarelos ou indgenas. As diferenas
entre alunos discriminados por cor/raa per-
sistem inclusive dentro das mesmas escolas e
com o controle das diferenas socioeconmicas
entre alunos e escolas (SOARES; ALVES, 2003).
Por isso, considerou-se relevante avaliar se a
presena de mais alunos brancos na escola est
associada ao valor do Ideb.
A proporo de alunos discriminados
por gnero na escola considerada relevan-
te porque, nos testes aplicados nas avaliaes
educacionais, os alunos, em geral, tm desem-
penho melhor em matemtica, e as alunas se
saem bem melhor em leitura. No Ideb, no h
distino entre esses contedos cognitivos,
que so sintetizados em uma nica medida
de desempenho padronizada. Contudo, o pro-
cesso de padronizao das proficincias para
o clculo do Ideb no considera as diferenas
184 Maria Teresa Gonzaga ALVES; Jos Francisco SOARES. Contexto escolar e indicadores educacionais: condies...
interpretativas que existem nas escalas origi-
nais de matemtica e leitura, o que torna o
indicador dominado pela proficincia em ma-
temtica. Como explica Soares (2011, p. 7), o
indicador de aprendizado do Ideb assume que
os alunos brasileiros sabem mais Matemtica
do que Leitura. Assim, considerou-se relevan-
te avaliar se a presena de mais alunos do que
alunas na mesma instituio tem associao
com o valor do Ideb da escola.
Os dois indicadores percentual de
brancos e de alunos foram obtidos pela pro-
poro, por escola, dessas categorias nas res-
pectivas variveis do questionrio respondido
pelos alunos na Prova Brasil.
- Infraestrutura da escola
No Brasil, infraestrutura fsica, equipa-
mentos e conservao do prdio escolar impor-
tam. Evidncias nesse sentido foram observa-
das em vrios estudos que analisaram dados
das avaliaes em larga escala conforme uma
reviso elaborada por Alves e Franco (2008).
Neste trabalho, a medida da infraestrutura da
escola foi obtida com base nos dados do Censo
Escolar, agregando indicadores de existncia
de: local prprio de funcionamento da esco-
la, gua tratada, energia eltrica, saneamento
bsico (coleta de lixo, de esgoto e presena de
banheiro na escola), outros espaos e recursos
escolares (biblioteca, laboratrio, cantina, com-
putadores e outros equipamentos eletrnicos).
A tcnica para a agregao desses itens em um
nico ndice assim como os seguintes refe-
rentes s escolas a mesma utilizada para
estimar o nvel socioeconmico mdio.
- Tamanho e complexidade da escola
O tamanho da escola medido pelo n-
mero de alunos tambm importa. Alunos que
estudam em escolas grandes tendem a ter de-
sempenho pior do que alunos de escolas me-
nores ou de tamanho moderado (LEE, 2008).
O tamanho da escola foi estimado com base
nas informaes do Censo Escolar referentes segmentos escolares. O modelo de regresso li-
quantidade de salas, funcionrios, nmero de near ajustado tem a seguinte expresso:
turmas e matrculas nas escolas.
Escolas que congregam alunos de dife- Ideb2009i = o + 1(MNSE)i + 2(%brancos)i + 3(%alunos)i
rentes nveis e modalidades de ensino so mais + 4(infraestrutura)i + 5(complexidade)i + ri
complexas porque necessitam de mais espao
fsico, mobilirio e equipamentos adaptados aos O quadro 1 contm a explicao detalha-
alunos de diferentes faixas etrias e necessida- da das covariveis includas no modelo.
des especficas, bem como um nmero maior
de profissionais e apoios variados. A medida Quadro 1 Variveis utilizadas nos modelos de anlise
da complexidade foi obtida agregando-se os
Variveis Tipo Descrio
indicadores das modalidades de ensino ofere-
cidas na escola ensino regular, da creche ao Varivel resposta
ensino mdio, e educao especial nos mesmos
nveis e o nmero de alunos portadores de ne- ndice de Desenvolvimento da Edu-
cao da Escola em 2009. Produto
cessidades especiais. Com isso, assume-se que da mdia das proficincias padroni-
a escola mais complexa se atende a alunos zadas em matemtica e leitura obti-
de diferentes etapas e modalidades de ensino, e Ideb 2009 Contnua das na Prova Brasil pelo indicador de
rendimento (o valor mdio das taxas
tambm se faz mais incluso. de aprovao da escola) atingido no
Esses dois ltimos fatores foram inicial- Censo Escolar. A escala tem valores
de zero a 10.
mente tratados como ndices separados, mas, aps
os testes iniciais, eles foram agregados em uma
Variveis explicativas
nica dimenso devido correlao entre eles.
Medida estimada via Teoria da
Anlises estatsticas Resposta ao Item (TRI) a partir de
informaes dos questionrios res-
MNSE
pondidos pelos alunos em avaliaes
O trabalho utiliza os dados referentes (Mdia do nvel
Contnua educacionais do Inep. A escala ori-
socioeconmico
ao Ideb 2009 de todas as escolas pblicas.4 O da escola)
ginal foi convertida para valores de
zero a 10. O MNSE refere-se mdia
banco de dados divulgado pelo Inep possui in- calculada a partir do NSE dos alunos
formaes sobre todas as escolas pblicas que de cada escola.
participaram da Prova Brasil e que alcanaram
o nmero mnimo exigido de alunos partici- % de alunos
Proporo de alunos que se decla-
pantes dessa avaliao (no mnimo, 10 alunos Contnua ram brancos, obtida no questionrio
brancos
da Prova Brasil.
ou 50% dos alunos matriculados na srie em
escolas menores). Proporo de alunos do sexo mascu-
% de alunos do
Inicialmente, fez-se uma anlise descri- Contnua lino, obtida no questionrio da Prova
sexo masculino
Brasil.
tiva dos dados para observao das tendncias
do Ideb e suas relaes com os fatores contex- Medida obtida via TRI a partir de in-
tuais, que ser apresentada em forma de gr- Infraestrutura da
Contnua
formaes do Censo Escolar. A esca-
escola la original foi convertida para valores
ficos. Em seguida, foram ajustados modelos de zero a 10.
de regresso linear mltipla para cada um dos
Medida obtida via TRI a partir de
informaes do Censo Escolar. A
Complexidade da escala final o produto das escalas
4- O Ideb 2011 foi divulgado quando este texto estava em fase de reviso Contnua
escola parciais de complexidade e de ta-
e, portanto, no haveria tempo para incorporar os dados mais recentes nos manho, convertidas para valores de
modelos analticos. Alm disso, os demais microdados utilizados da Prova zero a 10.
Brasil e do Censo Escolar do mesmo ano no foram publicados pelo Inep.

Educ. Pesqui., So Paulo, v. 39, n. 1, p. 177-194, jan./mar. 2013. 185

 A escolha desta abordagem analtica do Ideb do primeiro e do segundo segmento do
se justifica porque a questo de pesquisa con- ensino fundamental, o que sugere problemas
siste em verificar se h, nas escolas, associa- muito distintos nas duas etapas escolares.
o entre uma varivel resposta isto , o
Ideb 2009 e um conjunto de variveis expli- Tabela 1 Estatsticas descritivas das variveis
cativas referentes s caractersticas do aluna-
Sries iniciais do ensino fundamental
do (MNSEi, %brancosi, %alunosi) e das escolas
(infraestruturai e complexidadei). Sabe-se, en- Desvio-
N Mnimo Mximo Mdia
tretanto, que a associao entre uma varivel padro
resposta e qualquer covarivel depende de
Ideb 2009 (*) 43.400 0,20 9,00 4,35 1,10
quais outras variveis esto includas no mo-
delo. Por exemplo, a associao entre o Ideb
MNSE 43.392 1,05 7,77 4,66 0,79
2009 e o MNSEi depende das outras variveis
includas no modelo de regresso e, portan- % de alunos do
43.349 0,00 100,00 51,36 8,98
to, utilizadas para o clculo da associao. gnero masculino
Sendo assim, a resposta questo de pesquisa % de alunos
43.349 0,00 100,00 34,45 17,63
implica escolher adequadamente as covari- brancos
veis do modelo de regresso. Infraestrutura da
43.184 0,00 10,00 6,62 1,48
Outro aspecto importante a se destacar escola
que no faria sentido incluir, no ajuste do mo-
Complexidade 43.184 0,00 10,00 4,05 1,54
delo, o Ideb do ciclo anterior como covarivel,
uma vez que os valores do Ideb 2009 e do Ideb Nmero de escolas
33.042 - - - -
2007 so altamente associados. As escolas no no modelo
mudam tanto em dois anos. Apresena do Ideb
anterior no modelo de regresso impediria que Sries finais do ensino fundamental

as covariveis consideradas mostrassem sua Desvio-

N Mnimo Mximo Mdia
correlao com o Ideb 2009, pois esta estaria padro
completamente subsumida na correlao entre
os dois indicadores (Ideb 2009 e Ideb 2007). Se, Ideb 2009 (*) 31.781 0,70 8,00 3,68 0,85

entretanto, a questo desta pesquisa fosse des-

crever ou mesmo prever o comportamento do MNSE 31.636 0,91 8,20 4,67 0,90

Ideb de uma escola, a estratgia de anlise seria % de alunos do

outra. Nesse caso, usar o Ideb do ciclo anterior 31.760 0,00 100,00 45,72 9,74
gnero masculino
uma varivel j conhecida e altamente associa- % de alunos
da ao Ideb do ciclo seguinte muito melhor 31.760 0,00 100,00 33,27 20,10
brancos
do que usar simplesmente MNSEi, %brancosi, Infraestrutura da
%alunosi, infraestruturai e complexidadei, que 31.685 0,00 10,00 7,24 1,32
escola
so variveis apenas indiretamente associadas
varivel resposta. Ou seja, diferentes questes Complexidade 31.685 0,24 10,00 5,42 1,51

exigem diferentes modelos.

Nmero de escolas
24.734 - - - -
no modelo
Resultados
(*) Os valores do Ideb desta tabela no coincidem com os valores nacionais
divulgados no site do Inep porque as mdias do pas incluem o Ideb mdio
A tabela 1 sintetiza as estatsticas descri- do conjunto das escolas particulares calculado com os dados do Saeb.
tivas das variveis includas nos modelos de re- Fonte: Elaborao prpria a partir de dados da Prova Brasil, do Censo
gresso. Nota-se a discrepncia entre os valores Escolar e do Ideb (Inep/MEC).

186 Maria Teresa Gonzaga ALVES; Jos Francisco SOARES. Contexto escolar e indicadores educacionais: condies...
 Os grficos de caixas de nmero 1 a 10 as ocorrncias de escolas com valores de Ideb
descrevem as medidas de tendncia central e muito extremos (simbolizados pelos asteriscos)
de variabilidade do Ideb segundo os fatores para o subgrupo de MNSE em que se encon-
considerados. A linha pontilhada representa tram. Esses casos totalmente atpicos merecem
a mdia do Ideb de todas as escolas.5 Alguns estudos adicionais.
destaques podem ser feitos em relao ao Uma segunda observao diz respeito
conjunto dos grficos. aos valores de Ideb tendencialmente muito mais
Primeiro, observa-se em todos eles a baixos nos anos finais do ensino fundamental
grande disperso dos valores mdios do Ideb. em todos os subgrupos. A elevao da mdia
Por exemplo, no grfico 1, que compara os sub- desse nvel de ensino parece estar associada
conjuntos de escolas discriminadas pelos quar- principalmente aos poucos casos extremos, en-
tis da mdia do nvel socioeconmico (MNSE), quanto a maioria das escolas tm valores do
nota-se uma relao positiva, ou seja, escolas Ideb que podem ser considerados muito baixos.
nos quartis de MNSE mais baixos tendem a Por ltimo, notam-se fatores que no
apresentar valores igualmente mais baixos do mostram relaes muito claras com o Ideb nas
Ideb e, ao contrrio, escolas nos quartis mais anlises univariadas descritas nos grficos. Em
altos tm valores mais altos do Ideb. Mas h alguns grficos, observa-se maior contraste
uma grande variabilidade na distribuio. entre o subgrupo inferior em comparao com
Destacam-se os muitos casos extremos (sim- o subgrupo superior, mas mesmo essa observa-
bolizados pelos pequenos crculos), o que sig- o varia entre os nveis de ensino. Na sequn-
nifica que h escolas com MNSE mais baixos, cia, sero descritos os resultados dos modelos
mas com valores do Ideb em nvel muito alto, de anlise para se verificarem as relaes ob-
e tambm o contrrio. Alm disso, registram-se servadas de forma simultnea.

Grfico 1 Mdia do Ideb 2009 (sries iniciais) por quartil Grfico 2 Mdia do Ideb 2009 (sries finais) por quartil do
do MNSE MNSE

10,00 10,00
ndice de Desenvolvimento da Educao (P x N) - 2009

ndice de Desenvolvimento da Educao (P x N) - 2009

8,00 8,00

6,00 6,00

4,00 4,00

2,00 2,00

0,00 0,00

1 2 3 4 1 2 3 4
Grupo Percentil (NSE2) Grupo Percentil (NSE2)

Fonte: Elaborao prpria a partir de dados do Inep (Censo Escolar). Fonte: Elaborao prpria a partir de dados do Inep (Censo Escolar).

5- As caixas e as linhas mostram a tendncia central (mediana,

assinalada pela linha que divide a caixa) e a variabilidade (a distncia extrapolam a distribuio de forma extrema (assinalados com crculos)
de uma ponta outra). Alm disso, indicam os casos cujos valores ou muito extrema (asteriscos).

Educ. Pesqui., So Paulo, v. 39, n. 1, p. 177-194, jan./mar. 2013. 187

 Grfico 3 Mdia do Ideb 2009 (sries iniciais) por quartil de Grfico 4 Mdia do Ideb 2009 (sries finais) por quartil de
proporo de alunos brancos proporo de alunos brancos
ndice de Desenvolvimento da Educao (P x N) - 2009

10,00 10,00

ndice de Desenvolvimento da Educao (P x N) - 2009

8,00 8,00

6,00 6,00

4,00 4,00

2,00 2,00

0,00 0,00
1 2 3 4 1 2 3 4
Grupo Percentil (brancos) Grupo Percentil (brancos)

Fonte: Elaborao prpria a partir de dados do Inep (Censo Escolar). Fonte: Elaborao prpria a partir de dados do Inep (Censo Escolar).

Grfico 5 Mdia do Ideb 2009 (sries iniciais) por quartil de Grfico 6 Mdia do Ideb 2009 (sries finais) por quartil de
alunos do gnero masculino alunos do gnero masculino
ndice de Desenvolvimento da Educao (P x N) - 2009

10,00
ndice de Desenvolvimento da Educao (P x N) - 2009

10,00

8,00 8,00

6,00 6,00

4,00 4,00

2,00 2,00

0,00 0,00

1 2 3 4 1 2 3 4
Grupo Percentil (meninos) Grupo Percentil (meninos)

Fonte: Elaborao prpria a partir de dados do Inep (Censo Escolar). Fonte: Elaborao prpria a partir de dados do Inep (Censo Escolar).

Grfico 7 Mdia do Ideb 2009 (sries iniciais) por quartil de Grfico 8 Mdia do Ideb 2009 (sries finais) por quartil de
infraestrutura da escola infraestrutura da escola
10,00 10,00
ndice de Desenvolvimento da Educao (P x N) - 2009

ndice de Desenvolvimento da Educao (P x N) - 2009

8,00 8,00

6,00 6,00

4,00 4,00

2,00 2,00

0,00 0,00
1 2 3 4 1 2 3 4
Grupo Percentil (infraestrutura) Grupo Percentil (infraestrutura)

Fonte: Elaborao prpria a partir de dados do Inep (Censo Escolar). Fonte: Elaborao prpria a partir de dados do Inep (Censo Escolar).

188 Maria Teresa Gonzaga ALVES; Jos Francisco SOARES. Contexto escolar e indicadores educacionais: condies...
 Grfico 9 Mdia do Ideb 2009 (sries iniciais) por quartil de Grfico 10 Mdia do Ideb 2009 (sries finais) por quartil de
complexidade x tamanho da escola complexidade x tamanho da escola
ndice de Desenvolvimento da Educao (P x N) - 2009

10,00 10,00

ndice de Desenvolvimento da Educao (P x N) - 2009

8,00 8,00

6,00 6,00

4,00 4,00

2,00 2,00

0,00 0,00

1 2 3 4 1 2 3 4
Grupo Percentil (Complexidade x tamanho) Grupo Percentil (Complexidade x tamanho)

Fonte: Elaborao prpria a partir de dados do Inep (Censo Escolar). Fonte: Elaborao prpria a partir de dados do Inep (Censo Escolar).

A tabela 2 apresenta os resultados do ra todos sejam significativos. Na escala do Ideb,

ajuste dos modelos de regresso linear mlti- devido sua concepo metodolgica, um in-
pla para sries iniciais e sries finais do ensino cremento de poucos dcimos no indicador pode
fundamental. Destacam-se algumas tendncias. significar uma mudana substantiva em seu pa-
Os valores dos coeficientes () e dos coeficientes tamar (Cf. SOARES, 2011). Portanto, valores to
padronizados (Beta) so em geral baixos, embo- pequenos no devem ser negligenciados.

Tabela 2 Modelo de regresso linear mltipla para o Ideb 2009 (sries iniciais e sries finais do ensino fundamental)
Ideb 2009 Ideb 2009
Variveis 5 ano 9 ano
Beta Sig. Beta Sig.
(Constante) 0,19 0,00 1,44 0,00
MNSE 0,70 0,50 0,00 0,34 0,36 0,00
% de alunos do gnero masculino -0,01 -0,04 0,00 0,01 0,06 0,00
% de alunos brancos 0,01 0,08 0,00 0,01 0,24 0,00
Infraestrutura 0,17 0,22 0,00 0,03 0,04 0,00
Complexidade -0,03 -0,05 0,00 -0,03 -0,05 0,00
R2 0,47 0,31
Fonte: Elaborao prpria a partir de dados da Prova Brasil, do Censo Escolar e do Ideb (Inep/MEC).

Os resultados evidenciam que o Ideb da problemas de reprovao e abandono precoce

escola fortemente associado ao nvel socioe- da escola afeta mais os alunos no brancos.
conmico mdio de seus alunos, mesmo com A maior proporo de alunos nas sries iniciais
o controle dos fatores considerados em rela- do ensino fundamental em comparao com as
o escola. Outros fatores do aluno tambm alunas tem impacto negativo, mas, nas sries
tm impacto significativo no Ideb, porm em finais, a associao opera em sentido contrrio.
magnitude bem menor. A maior proporo de Em ambos os casos, os valores dos coeficientes,
alunos brancos faz diferena, mas, nesse caso, embora significativos, so mnimos.
a associao maior nas sries finais. Tal re- Entre os fatores das escolas, destaca-se
sultado indica que a seletividade no segundo o impacto positivo da infraestrutura, princi-
segmento do ensino fundamental devido aos palmente nas sries iniciais. Para facilitar o

Educ. Pesqui., So Paulo, v. 39, n. 1, p. 177-194, jan./mar. 2013. 189

entendimento desse resultado, vamos imaginar
dois estabelecimentos de ensino hipotticos
chamados de A e B. Os dois estabelecimentos
atendem aos anos iniciais do ensino funda-
mental, possuem caractersticas semelhantes
quanto ao nvel socioeconmico dos alunos
(por exemplo, na mdia da escala, cujo valor
4,7) e os outros fatores associados aos alunos
apresentam valores constantes e neutros. A es-
cola A possui uma infraestrutura ideal (valor
igual a 10). Com isso, ela poderia atingir um
Ideb de 5,4, valor acima da mdia nacional em
2009. A escola B, com infraestrutura bem pior
(por exemplo, com valor igual a 1), teria um
Ideb de 3,5. Vale ressaltar que na escala do
Ideb a diferena entre essas duas escolas hipo-
tticas enorme.
Se o exerccio fosse aplicado a dois es-
tabelecimentos de ensino dos anos finais do
ensino fundamental, a diferena no seria to
grande. Essa anlise sugere que uma mesma in-
fraestrutura que parece adequada para os anos
iniciais do ensino fundamental pode no ser su-
ficiente para os anos finais.
O fator complexidade da escola tem um
efeito negativo e equivalente nos dois nveis de
ensino. Esse resultado pode refletir o desempe-
nho das escolas menores localizadas em peque-
nos municpios do interior do pas e que tm va-
lores do Ideb acima da mdia nacional (PADILHA
et al., 2012). Aplicando o valor do coeficiente ao
exemplo hipottico descrito, a escola A, se fos-
se mais complexa isto , um estabelecimento
grande, com muitos alunos, funcionrios e com
atendimento a vrios nveis e tipos de alunos ,
teria o Ideb reduzido para 5,1, enquanto a escola
B teria seu Ideb reduzido para 3,2. A evidncia
que, no ensino fundamental, melhor estudar
em estabelecimentos menores e/ou com atendi-
mento menos diversificado.
Discusso
Este trabalho analisou o Ideb da escola
considerando, simultaneamente, alguns fato-
res que potencialmente impactam seu valor. O
190 Maria Teresa Gonzaga ALVES; Jos Francisco SOARES. Contexto escolar e indicadores educacionais: condies...
estudo foi motivado pelo reconhecimento de
que o uso intensivo e disseminado do indi-
cador no autoriza sua reduo a apenas um
ranking entre escolas e sistemas de ensino. O
Ideb, inegavelmente, conquistou legitimidade
na atual conjuntura, haja vista sua incorpora-
o no texto do Plano Nacional da Educao
(PNE) para o presente decnio. Isso desafia a
pesquisa educacional a ampliar sua influn-
cia no debate pblico que gira em torno desse
tema com base em argumentos fundamenta-
dos. Entretanto, o uso unidimensional do Ideb,
ou seja, a divulgao de seu valor bruto sem
a considerao das condies contextuais das
escolas, o que prevalece no uso pblico do
indicador. Nesse sentido, o trabalho corrobora
o esforo de outros estudos empricos no sen-
tido de desvelar as condies para se atingir a
qualidade educacional aferida pelo Ideb e por
outros indicadores do mesmo tipo.
Procurou-se demonstrar, a partir dos da-
dos empricos, que as escolas devem ser vistas
pelo aprendizado de seus alunos a expresso da
efetivao de sua funo social , mas tambm
pelas condies contextuais para obteno des-
ses resultados. Um sistema educacional s pode
ser dito de qualidade se suas desigualdades so
tambm consideradas na anlise de seu desem-
penho. Os resultados descritos na seo anterior
evidenciaram que a sntese da qualidade da escola
em um nico nmero no contempla as condies
desiguais entre os estabelecimentos de ensino.
Entre os fatores analisados neste trabalho,
o maior impacto no Ideb, como esperado e com-
patvel com a literatura da rea educacional,
a composio do grupo de alunos matriculados
no estabelecimento de ensino. Para escolas que
congregam mais alunos com condies socio-
econmicas desfavorveis, muito mais difcil
atingir as metas associadas ao Ideb.6 Entretanto,
esse fator s mudar na medida em que polticas
sociais tenham sucesso.
6- O impacto do nvel socioeconmico prevalece mesmo quando se
considera, em modelos preditivos, o Ideb do ciclo anterior. Tal resultado
no est exposto neste trabalho, mas foi constatado em modelos preditivos
testados no escopo do programa de pesquisa que resultou neste artigo.
 Quanto aos demais fatores do aluno
(gnero masculino e cor/raa branca), os im-
pactos relativos no Ideb so muito pequenos,
embora significativos. A indicao de que h
maior seletividade racial ao longo do ensino
fundamental e de que, no segundo segmento, a
maior proporo de alunos em relao s alu-
nas est associada ao Ideb mdio mais elevado.
Contudo, nesse caso, preciso investigar se a
forma como o Ideb calculado com a supe-
restimao da proficincia em matemtica, rea
em que os meninos se saem melhor no Saeb
(SOARES, 2011) pode ter relao com esse re-
sultado. H necessidade, portanto, de estudos
adicionais sobre os fatores raa/cor e gnero,
sobretudo em modelos com dados agregados.
As condies de infraestrutura e de com-
plexidade da escola medidas com os dados
do Censo Escolar tambm guardam relao
significativa com o Ideb. Para terem seu direi-
to educacional atendido, os alunos que trazem
menos de casa precisam de escolas com melhor
infraestrutura e mais focadas em suas neces-
sidades de aprendizado. Nas sries iniciais do
ensino fundamental, o efeito da infraestrutura
da escola no Ideb bem maior do que nas sries
finais. Uma possvel explicao que quanto
mais se avana no sistema escolar e na idade
dos alunos, mais as escolas precisam oferecer.
A mesma infraestrutura que atende razoavel-
mente aos anos iniciais da escolarizao pare-
ce no ter efeito equivalente no segmento se-
guinte, que envolve mais disciplinas escolares,
mais professores especialistas e uma gerao
bem mais exigente e diversificada. Essa hipte-
se, entretanto, deveria ser tambm verificada a
partir de outras pesquisas. O impacto da com-
plexidade da escola ainda pouco estudado,
mas os resultados indicam que as escolas mais
complexas ou seja, os estabelecimentos maio-
res e que atendem a mais nveis e modalidades
de ensino implicam complicaes adicionais
para as escolas atingirem um Ideb mais alto.
Uma reflexo slida para a superao
das limitaes das escolas o indicador Custo
Aluno/Qualidade Inicial (CAQi), que aponta a
Educ. Pesqui., So Paulo, v. 39, n. 1, p. 177-194, jan./mar. 2013.
necessidade de que todos os estabelecimentos
de ensino tenham patamares de recursos com-
patveis com as necessidades de aprendizado de
seus alunos (CARREIRA; PINTO, 2007). Embora
no tenha sido possvel incluir na anlise emp-
rica a questo dos docentes por limitao dos
dados utilizados no trabalho , teoricamente
fica claro que isso tambm necessrio.
Os resultados deste estudo, do ponto de
vista metodolgico, sugerem a necessidade da
busca de um consenso em duas temticas. Em
primeiro lugar, diante da grande variao de
resultados dos alunos dentro de cada escola, o
uso da mdia da Prova Brasil e da taxa de apro-
vao nos segmentos escolares para o clculo
do Ideb tem como consequncia o desapare-
cimento da variao dos indicadores originais
entre os alunos. Na literatura educacional, h
muitos estudos que mostram a possibilidade de
vis quando se utiliza a escola como unidade de
anlise. Para lidar com essa situao foram de-
senvolvidos os modelos hierrquicos nos quais
o aluno a unidade de anlise, mantendo-se
a escola como unidade de interveno e pos-
sibilitando-se, assim, o estudo do efeito esco-
la. Idealmente, esses modelos deveriam sempre
ser utilizados para estudos educacionais. Para
o problema em tela, tomar-se-iam duas condi-
es do aluno como resposta: seu rendimento,
ou seja, sua situao de aprovao, abando-
no ou reprovao (dado obtido com o Censo
Escolar), e seu desempenho, medido pelas pro-
ficincias na Prova Brasil. Dessa forma, seria
possvel uma anlise mais fina da qualidade
educacional quanto ao rendimento e ao desem-
penho dos alunos em vez de uma sntese na
mdia da escola, que pode ser inflada pela me-
lhora apenas de um desses dois elementos. Mas,
para isso, seria necessrio que a Prova Brasil e
o Censo Escolar fossem compatveis no nvel do
aluno, e no apenas no nvel da escola, o que
ainda no possvel.
Em segundo lugar, este estudo convida
organizao de investigaes com desenho
metodolgico misto, nos quais escolas com va-
lores extremos de rendimento e desempenho
191
 identificados pelos resduos positivos ou
negativos dos modelos de regresso seriam
investigadas a partir de metodologias qualitati-
vas. Isso j foi feito em algumas ocasies em al-
guns Estados do Brasil (ABRUCIO, 2010; VIDAL;
VIEIRA, 2011) e merece continuidade.
Fica claro, portanto, que as polticas p-
blicas para a educao brasileira exigem o estudo
dos dados existentes de forma muito mais ampla
do que apenas sua sntese em um indicador como
o Ideb, assim como a aproximao de metodolo-
gias provenientes de epistemologias distintas.

Referncias

ABRUCIO, Fernando Luiz. Gesto escolar e qualidade da educao: um estudo sobre dez escolas paulistas. Estudos & Pesquisas
Educacionais, So Paulo, v. 1, p. 241-274, 2010.

ALMEIDA, Ana Maria F. O assalto educao pelos economistas. Tempo Social, So Paulo, v. 20, p. 163-178, 2008.

ALVES, Maria Teresa Gonzaga; FRANCO, Creso. A pesquisa em eficcia escolar no Brasil: evidncias sobre o efeito das escolas e
fatores associados eficcia escolar. In: BROOKE, Nigel; SOARES, Jos Francisco (Eds.). Pesquisa em eficcia escolar: origem
e trajetrias. Belo Horizonte: Editora UFMG, 2008. p. 482-500.

ALVES, Maria Teresa Gonzaga; SOARES, Jos Francisco. Medidas de nvel socioeconmico em pesquisas sociais: uma aplicao
aos dados de uma pesquisa educacional. Opinio Pblica, Campinas, v. 15, n. 1, p. 1-30. 2009.

______. Medida de nvel socioeconmico de alunos e escolas com as informaes das avaliaes educacionais em
larga escala. Trabalho aceito para apresentao no 36 Encontro Anual da Associao Nacional de Ps-Graduao e Pesquisa em
Cincias Sociais, guas de Lindoia, 21 a 25 de outubro de 2012.

BONAMINO, Alcia; FRANCO, Creso. Avaliao e poltica educacional: o processo de institucionalizao do SAEB. Cadernos de
Pesquisa, So Paulo, n. 108, p. 101-132, 1999.

BONAMINO, Alicia; SOUSA, Sandra Zkia. Trs geraes de avaliao da educao bsica no Brasil: interfaces com o currculo da/
na escola. Educao e Pesquisa, So Paulo,v. 38, n. 2, p. 373-388, 2012.

BOURDIEU, Pierre; PASSERON, Jean-Claude. A reproduo: elementos para uma teoria do sistema de ensino. Petrpolis: Vozes, 2008.

BRASIL. Decreto no 6.064, de 24 de abril de 2007. Dispe sobre a implementao do Plano de Metas Compromisso Todos pela
Educao, pela Unio Federal, em regime de colaborao com Municpios, Distrito Federal e Estados, e a participao das famlias
e da comunidade, mediante programas e aes de assistncia tcnica e financeira, visando a mobilizao social pela melhoria da
qualidade da educao bsica. Dirio Oficial da Unio, Braslia, 24 abr. 2007.

______. Projeto de Lei do Plano Nacional de Educao (PNE) para vigorar de 2011 a 2020. Texto enviado pelo Governo
Federal ao Congresso. Braslia: Ministrio da Educao, 15 dez. 2010.

BROOKE, Nigel; CUNHA, Maria Amlia. A avaliao externa como instrumento da gesto educacional nos estados. Estudos
& Pesquisas Educacionais, So Paulo, v. 2, p. 17-79, 2011. Disponvel em: <http://www.fvc.org.br/estudos-e-pesquisas/
livro-2-2011.shtml>. Acesso em 20 dez. 2012.

BRYK, Antony S.; LEE, Valerie. A multilevel model of social distribution of high school. In: DARLING-HAMMOND, Linda (Ed.). Review
of research in education. Washington: American Education Research Association, 1989. p. 171-267.

CARREIRA, Denise; PINTO, Jos Marcelino Resende. Custo aluno-qualidade inicial: rumo educao pblica de qualidade no
Brasil. So Paulo: Global, 2007.

192 Maria Teresa Gonzaga ALVES; Jos Francisco SOARES. Contexto escolar e indicadores educacionais: condies...
COLEMAN, James et al. Equality of educational opportunity. Washington: U.S. Department of Health, Education, and Welfare, 1966.

COTTA, Tereza Cristina. Avaliao educacional e polticas pblicas: a experincia do Sistema Nacional de Avaliao da Educao
Bsica (Saeb). Revista do Servio Pblico, Braslia, v. 52, n. 4, p. 89-111, 2001.

DUBET, Franois. O que uma escola justa? Cadernos de Pesquisa, So Paulo, v. 34, p. 539-555, 2004.

RNICA, Maurcio; BATISTA, Antnio Augusto Gomes. Educao em territrios de alta vulnerabilidade social na metrpole:
um caso na periferia de So Paulo. So Paulo: CENPEC, nov. 2011. (Informe de Pesquisa, n. 3)

FERNANDES, Reynaldo. ndice de Desenvolvimento da Educao Bsica (Ideb). Braslia: Inep, 2007.

FERNANDES, Reynaldo; GREMAUD, Amaury Patrick. Qualidade da educao: avaliao, indicadores e metas. In: VELOSO, Fernando
et al. (Orgs.). Educao bsica no Brasil: construindo o pas do futuro. Rio de Janeiro: Elsevier, 2009. p. 213-238.

FERRAZ, Cludio. Sistemas educacionais baseados em desempenho, metas de qualidade e a remunerao de professores. In:
VELOSO, Fernando et al. (Orgs.). Educao bsica no Brasil: construindo o pas do futuro. Rio de Janeiro: Elsevier, 2009. p. 239-257.

FRANCO, Creso et al. Qualidade e equidade em educao: reconsiderando o significado de fatores intra-escolares.Ensaio:
Avaliao e Polticas Pblicas em Educao, Rio de Janeiro, v. 15, n. 55,p. 277-298, 2007.

FREITAS, Luiz Carlos de. Eliminao adiada: o ocaso das classes populares no interior da escola e a ocultao da (m) qualidade
do ensino. Educao e Sociedade, Campinas, v. 28, n. 100, p. 965-987, 2007.

GOUVEIA, Andra Barbosa; SOUZA, ngelo Ricardo de; TAVARES, Tas Moura. O Ideb e as polticas educacionais na regio
metropolitana de Curitiba. Estudos em Avaliao Educacional, Rio de Janeiro, v. 20, n. 42, p. 45-58, 2009.

LEE, Valerie. Utilizao e modelos hierrquicos lineares para estudar contextos sociais. In: BROOKE, Nigel; SOARES, Jos Francisco
(Ed.). Pesquisa em eficcia escolar: origem e trajetrias. Belo Horizonte: Editora UFMG, 2008. p. 273-298.

MACHADO-SOARES, Tufi et al. A gesto escolar e o IDEB da escola. Pesquisa e Debate em Educao, Juiz de Fora, v. 1, n. 1,
p. 45-68, 2011.

OLIVEIRA, Romualdo Portela de; ARAJO, Gilda Cardoso de. Qualidade do ensino: uma nova dimenso da luta pelo direito
educao.Revista Brasileira de Educao, Rio de Janeiro, n. 28, p. 5-23, 2005.

PADILHA, Frederica et al. As regularidades e excees no desempenho do Ideb dos municpios. Estudos em Avaliao
Educacional, So Paulo, v. 23, n. 51, p. 58-81, 2012.

SEN, Amartya. The idea of justice. Cambridge: Harvard University Press, 2009.

SETUBAL, Maria Alice. Equidade e desempenho escolar: possvel alcanar uma educao de qualidade para todos? Revista
Brasileira de Estudos Pedaggicos, Braslia, v. 91, n. 228, p. 345-366, 2010.

SOARES, Jos Francisco. Measuring cognitive achievement gaps and inequalities. International Journal of Educational
Research, v. 45, p. 176-187, 2006.

______. Melhoria do desempenho cognitivo dos alunos do ensino fundamental. Cadernos de Pesquisa, So Paulo, v. 37, n. 130,
p. 135-160, 2007.

______. Anlise dos pressupostos educacionais e estatsticos do ndice de Desenvolvimento da Educao Bsica (IDEB). In:
ENCONTRO DE PESQUISA EM EDUCAO DA REGIO SUDESTE, 10., 2011, Rio de Janeiro. Anais... Rio de Janeiro: ANPED, 2011.

SOARES, Jos Francisco; ALVES, Maria Teresa Gonzaga. Desigualdades raciais no sistema brasileiro de educao bsica.
Educao e Pesquisa, So Paulo, v. 29, n. 1, p. 147-165, 2003.

SOUSA, Sandra Zkia; OLIVEIRA, Romualdo Portela de. Sistemas Estaduais de Avaliao: Uso dos Resultados, Implicaes e
Tendncias. Cadernos de Pesquisa, So Paulo, v. 40, n. 141, p. 793-822, 2010.

Educ. Pesqui., So Paulo, v. 39, n. 1, p. 177-194, jan./mar. 2013. 193

TODOS PELA EDUCAO. Resultados do Ideb com foco na equidade e na qualidade das redes pblicas do pas:
nota tcnica dos dados e anlises complementares. Disponvel em: <http://www.todospelaeducacao.org.br//arquivos/
biblioteca/2010_08_13_documento_tecnico_equidade.pdf>. Acesso em: 5 jun. 2012.

VIDAL, Eloisa Maia; VIEIRA, Sofia Lerche. Gesto educacional e resultados no Ideb: um estudo de caso em dez municpios
cearenses. Estudos em Avaliao Educacional, So Paulo, v. 22, p. 419-434, 2011.

WILLMS, Jon Douglas; SOMERS, Marie-A. Family, classroom, and school effects on childrens educational outcomes in Latin
America. School Effectiveness and School Improvement, v. 12, n. 4, p. 409-445, 2001.

Recebido em: 22.06.2012

Aprovado em: 18.09.2012

Maria Teresa Gonzaga Alves professora adjunta do Departamento de Cincias Aplicadas Educao da Faculdade de
Educao da Universidade Federal de Minas Gerais e pesquisadora do Grupo de Avaliao e Medidas Educacionais (GAME/
FAE-UFMG).

Jos Francisco Soares professor titular aposentado da Faculdade de Educao da Universidade Federal de Minas Gerais
e pesquisador do Grupo de Avaliao e Medidas Educacionais (GAME/FAE-UFMG).

194 Maria Teresa Gonzaga ALVES; Jos Francisco SOARES. Contexto escolar e indicadores educacionais: condies...