231

E
m

Q
u
e
s
t

o
,

P
o
r
t
o

A
l
e
g
r
e
,

v
.

1
8
,

E
d
i

o

E
s
p
e
c
i
a
l
,

p
.

2
3
1

-

2
4
7
,

d
e
z
.

2
0
1
2
.
Produo cientfica:
reflexos da avaliao
nos programas de ps-
graduao em Fsica
Anna Elizabeth Galvo Coutinho Correia
Ldia Alvarenga
Joana Coeli Ribeiro Gracia
RESUMO
Partindo da anlise da produo cientfica nos programas de
ps-graduao na rea de Fsica das Universidades Federais de
Minas Gerais, Pernambuco e Rio de Janeiro, no perodo de 2007
a 2009, utilizou-se a triangulao metodolgica por contemplar a
flexibilizao dos mtodos de natureza quantitativa (bibliometria
e cientometria) para a produo cientfica; e qualitativa e inter-
pretativa (anlise de contedo) para documentos normatizadores
e entrevistas. Os principais resultados constataram a existncia de
instrumentos de incentivo e controle da produo cientfica nas
referidas instituies; a predominncia de trabalhos dos docentes
publicados em peridicos que so bem considerados perante a
comunidade cientfica e bem classificados segundo o sistema
de classificao da agncia de fomento (Qualis B); preocupao
quanto predominncia de avaliao da produo cientfica de
forma puramente quantitativa; e poltica de avaliao da CAPES
que ao mesmo tempo estimula e pressiona os pesquisadores por
meio de documentos a um contexto de produtividade cientfica.
PALAVRAS-CHAVE: Fsica. Programas de ps-graduao. Comu-
nicao cientfica avaliao. Bibliometria
232
E
m

Q
u
e
s
t

o
,

P
o
r
t
o

A
l
e
g
r
e
,

v
.

1
8
,

E
d
i

o

E
s
p
e
c
i
a
l
,

p
.

2
3
1

-

2
4
7
,

d
e
z
.

2
0
1
2
.
1 Introduo
A universidade brasileira vem, ao longo dos anos, consoli-
dando a sua posio como locus de desenvolvimento de pesquisa
cientfca e tecnolgica no pas, apoiada nos mais diversos rgos
de fomento. No decorrer da dcada de 2000, fatores econmi-
cos, polticos e sociais interferiram e geraram transformaes
importantes no processo de produo cientfca nas universida-
des (CORREIA, 2006). Transformaes estas introduzidas pela
Coordenao de Aperfeioamento de Pessoal de Nvel Superior
(CAPES), atravs de suas avaliaes, cujos intervalos de tempo
so cada vez mais curtos e que acompanham os moldes inter-
nacionais, ocasionando dessa forma, o aumento da produo
cientfca com a preocupao de publicao em peridicos Qualis
e em Qualis internacional.
O processo de produo cientfca visto sob duas ticas:
a primeira a da prestao de contas do docente para com a
sociedade que fnancia a pesquisa; e a segunda entendida como
a troca de informao entre cientistas, atravs dos diversos meios
de comunicao (formais e informais). Assim, ao realizar pesquisa
e comunicar seus resultados, os pesquisadores esto exercendo
atividades essenciais para a disseminao do conhecimento.
Com base no exposto, a proposta deste estudo analisar a
produo cientfca nos programas de ps-graduao na rea da
Fsica das Universidades Federais de Minas Gerais, Pernambuco
e Rio de Janeiro, no perodo de 2007 a 2009.
Pretendeu-se com tal estudo trazer subsdios para a discusso,
no mbito da Cincia da Informao, sobre a produo do co-
nhecimento, tornando mais conscientes os pesquisadores em sua
meta de se comportarem de acordo com os pares em mbito local,
regional, nacional e internacional. Da mesma forma, pretendeu-
se contribuir para a Bibliometria, campo de estudo da Cincia da
Informao, no que diz respeito ao uso de indicadores mtricos
relacionados produo cientfca, tendo como objeto de estudo
a rea da Fsica, em especial os programas de ps-graduao, por
se tratar de rea com reconhecimento internacional.
2 Procedimentos metodolgicos
O estudo utilizou a triangulao metodolgica por con-
templar a fexibilizao dos mtodos de natureza quantitativa
(bibliometria e cientometria), qualitativa e interpretativa (anlise
de contedo). As categorias de anlise utilizadas foram: produ-
tividade, incentivo, controle, crtica ao sistema de avaliao,
abordando-se dois tipos de fontes:
a) docentes, coordenadores e representantes da rea da
Fsica, no sistema nacional de planejamento e avaliao
233
E
m

Q
u
e
s
t

o
,

P
o
r
t
o

A
l
e
g
r
e
,

v
.

1
8
,

E
d
i

o

E
s
p
e
c
i
a
l
,

p
.

2
3
1

-

2
4
7
,

d
e
z
.

2
0
1
2
.
da CAPES;
b) documentos que regulam os programas e estimulam a
produo cientfca, tais como normas e regulamentos,
assim como anlise da produo cientfca dos docentes
entrevistados.
O estudo abrange a produo cientfca, no perodo de 2007
a 2009 dos docentes efetivos dos cursos de ps-graduao da rea
de Fsica no Brasil:
a) Universidade Federal de Minas Gerais (UFMG): 54
docentes, 363 artigos;
b) Universidade Federal de Pernambuco (UFPE): 30 docen-
tes, 224 artigos;
c) Universidade Federal do Rio de Janeiro (UFRJ): 69 do-
centes, 419 artigos;
As trs instituies totalizam 156 docentes e 1.037 artigos.
Os dados da produo cientfca foram coletados no Currculo
Lattes dos docentes, coordenadores e representantes, no perodo
de 14 a 24 de maro de 2010, por meio da ferramenta ScriptLat-
tes, enquanto que para o tratamento bibliomtrico utilizou-se o
DataWiew.
O Dataview possibilitou criar diferentes vises dos dados ar-
mazenados em um DataTable, permitindo diversos critrios para
ordenao e fltragem de dados, viabilizando a anlise das questes
referentes aos autores individualmente, como por exemplo, o
nmero de publicaes por autor. Esses dados permitem identi-
fcar a existncia de concentrao ou no da produo cientfca,
peridicos utilizados para publicao e o Qualis dos mesmos.
De posse dos dados, elaboraram-se roteiros de entrevistas
com a fnalidade de saber a opinio dos docentes, coordenadores e
representantes de rea de Fsica na CAPES sobre sua atual poltica
de avaliao. O uso desse instrumento se justifca por aproximar
o entrevistador do entrevistado, possibilitando registrar suas im-
presses relativas ao sistema avaliativo da CAPES, enquadr-las
nas categorias de anlise, bem como dirimir e/ou compreender
controvrsias porventura existentes. Assim, foram elaborados trs
roteiros distintos e aplicados pessoalmente, no perodo de 26 de
outubro a 26 de novembro de 2010. A partir de ento, foram
contatados, por telefone, os 156 docentes dos trs programas de
ps-graduao estudados, para agendamento de dia e hora para
aplicao do roteiro de entrevista, o que totalizou 103 docentes
entrevistados (UFMG = 43, UFPE= 17 e UFRJ = 43). Os demais
53 docentes no foram localizados.
Tanto nos documentos normatizadores como nas entrevistas,
utilizou-se a tcnica de anlise de contedo adotada por Bardin
(2008), explorando o que foi identifcado tanto nos levantamen-
tos junto aos atores envolvidos, quanto nos referidos documentos
234
E
m

Q
u
e
s
t

o
,

P
o
r
t
o

A
l
e
g
r
e
,

v
.

1
8
,

E
d
i

o

E
s
p
e
c
i
a
l
,

p
.

2
3
1

-

2
4
7
,

d
e
z
.

2
0
1
2
.
da agncia citada e dos programas de ps-graduao.
No que tange s entrevistas, estas foram transcritas integral-
mente, sendo passadas depois para a forma da lngua culta, dando
melhor entendimento s ideias explicitadas pelos atores. Assim,
utilizou-se o modelo temtico-categorial de anlise, por ser uma
anlise de contedo que implica operaes de desmembramento
de texto, seccionando, dessa forma, partes que correspondam s
temticas.
Tornou-se possvel interpretar, nos documentos normatiza-
dores e resultados das entrevistas dos pesquisadores envolvidos,
discursos que, aparentemente simblicos e polissmicos, escon-
dem um sentido que convm desvendar (BARDIN, 2008, p.16).
3 Anlise dos dados
Nesta seo exploram-se as categorias de anlise (produtivi-
dade, incentivo, controle) citadas na metodologia, identifcando
o que consta explicitamente sobre essas categorias nos documen-
tos normatizadores da CAPES e dos programas estudados. Tais
anlises tambm foram intermediadas com crticas ao sistema de
avaliao, utilizando-se das falas dos atores envolvidos obtidas
nas entrevistas.
Dessa forma, ao analisar a categoria produtividade, estudou-
se a produo cientfca dos 156 docentes dos programas de
ps-graduao em Fsica da UFMG, UFPE e UFRJ, objetivando
identifcar o ranking da produo cientfca; bem assim os peri-
dicos utilizados para a divulgao dos resultados das pesquisas;
o Qualis das respectivas revistas; e formas de publicao, se
individual ou coletiva.
De um universo de 156 docentes, foram analisadas as produ-
es de 152, pois quatro (04) docentes, da UFMG (2) e da UFRJ
(2) no apresentaram produo cientfca no perodo estudado.
Os nomes pessoais dos docentes foram omitidos sendo identi-
fcados apenas pela sigla da sua instituio, seguida da palavra
Docente, entre parnteses.
No que se refere aos quatro docentes no entrevistados,
observa-se que um deles era docente aposentado e no possua
artigos publicados no perodo, porm apresentava produo de
livros (item no includo neste estudo). Seu Currculo Lattes
tambm informou que era bolsista de produtividade do CNPq,
credenciado ao referido programa (UFMG, Docente 2). O se-
gundo docente no possua produo no perodo, mas continuava
vinculado ao referido programa; vale mencionar ainda que o
ltimo ano de atualizao do seu Currculo Lattes foi 2004. No
foram constatadas as razes para tal ocorrncia, entretanto tal tipo
de comportamento pode ser considerado como um contrassenso,
235
E
m

Q
u
e
s
t

o
,

P
o
r
t
o

A
l
e
g
r
e
,

v
.

1
8
,

E
d
i

o

E
s
p
e
c
i
a
l
,

p
.

2
3
1

-

2
4
7
,

d
e
z
.

2
0
1
2
.
por parte do programa ou do docente (UFMG, Docente 44).
Quanto aos outros dois docentes, eles no apresentavam
produo no perodo e estavam descredenciados do programa
(UFRJ, Docente 3 e Docente 14).
No perodo estudado, os 152 docentes publicaram 1.037
artigos completos em peridicos. Ao observar a produo anual
acumulada no perodo pelos programas, verifcou-se uma dimi-
nuio de 21,8% no ano de 2008, comparado ao de 2007, e uma
mnima recuperao de 19,8% em 2009, quando comparado a
2008, essa pequena recuperao representando um acrscimo
de 0,6%.
Ao analisar a produo dos programas separadamente,
verifcou-se que o programa da UFMG obteve um total de 375
artigos e apresentava queda progressiva da produo cientfca no
perodo analisado. J a UFPE apresentou um total de 228 artigos
produzidos, se comportando de forma diferenciada, apresentando
aumento de 3,5 em 2008, ultrapassando o total de 2007, e no
ano de 2009 obteve queda de 4,4%, um pouco abaixo do total de
2007. No que se refere UFRJ, esta apresentou um total de 434
artigos, comportando-se de forma inversa UFPE, com queda
acentuada de 11,3% em 2008 e recuperao de 6,5% em 2009,
aproximando-se do total de 2007.
Os 1.037 de artigos produzidos no perodo, excludos os
artigos duplicados, representam 2.143 autores. Destes, apenas
7,1% eram do quadro permanente dos programas. Quando ana-
lisada a produo de artigos publicados, fcou visvel que 90,2%
dos docentes produziram entre 44 e trs artigos, enquanto que
9,8% publicaram entre um e dois artigos no perodo. Como
previsvel, o grupo produtivo em se tratando de publicao em
artigos cientfcos, tendo em vista o percentual 90,2% de docentes
que possuem produo igual ou superior recomendada pela
rea da Fsica.
Observa-se ainda que um dos sujeitos apresentou 44 artigos
no perodo, o que representa uma mdia de 14,6 artigos/ano. Vale
mencionar que dentre o total de artigos publicados pelo referido
docente, este s aparece como primeiro autor em um artigo
(UFPE, Docente 7). A esse respeito, o Relatrio de Avaliao
2007-2009 do trinio 2010 da CAPES, quesito 4.1 denonimado
publicao qualifcada do programa por docentes permanen-
tes, indica que a avaliao quantitativa, atendendo aos critrios
defnidos no documento de rea, obtendo o quantitativo de 2,2
artigos para o nmero de publicaes nos Qualis A1, A2, B1, B2,
B3, B4 e B5, confrmando os resultados encontrados no presente
estudo (COORDENAO..., 2011).
Na anlise dos documentos dos programas das instituies es-
tudadas, a UFPE foi a instituio que indicou nmero mnimo de
236
E
m

Q
u
e
s
t

o
,

P
o
r
t
o

A
l
e
g
r
e
,

v
.

1
8
,

E
d
i

o

E
s
p
e
c
i
a
l
,

p
.

2
3
1

-

2
4
7
,

d
e
z
.

2
0
1
2
.
publicaes por docente no trinio; no Manual da Ps-graduao
da referida universidade, o pargrafo primeiro estabelece:
Alm dos critrios estabelecidos no caput deste artigo, o docente
com pelo menos trs anos consecutivos de credenciamento dever
satisfazer os seguintes critrios no perodo de trs anos que
antecede a data da avaliao: (a) [...] ter publicado pelo menos 3
(trs) artigos em revistas indexadas. (UNIVERSIDADE..., 2011, p.20)
Identifcou-se que 87% dos docentes do programa da UFPE
publicaram trs ou mais artigos no perodo analisado. Constata-se
que o docente induzido a extrair o maior nmero de artigos dos
projetos em curto espao de tempo, como afrma Luz (2005),
evidenciando uma produtividade que conduz o docente a parti-
cipar de consrcios, como tambm afrma o docente:
[...] existe uma presso de fora, para se gerar nmeros. Se voc
consultar o Lattes, na rea de Fsica, verificando o nmero de
autores que tm os trabalhos; voc identifica setenta, oitenta,
oitenta e um, oitenta e dois trabalhos. No incio da primeira metade
dos anos 1990 surgiu esse vis que chamam de rede de pesquisa,
resultando na montagem da rede, ento, aqui no departamento
tem professores que publicam muito, dez, onze, doze, treze
trabalhos por ano; se voc lhes perguntar alguma coisa sobre o
contedo dos doze trabalhos publicados eles no respondero,
nem mesmo sabem quais foram seus papis nesses trabalhos. Eu
j fui convidado pra participar de um consrcio desses, onde
esto juntas dez pessoas, cada uma fazendo um trabalho por ano
e colocando os nomes dos outros nove autores colaboradores.
Ento, eu prefiro ficar longe, publicando muito menos, mergulhado
e embebido nesse mar infernal de burocracia (UFPE, Docente 22).
O trecho acima aponta para um incremento produtividade,
associando-se o fazer acadmico lgica industrial, levando a
que a refexo seja substituda pela reao, e [...] a imaginao
pela descrio sociolgica, a utopia pela realpolitik. (ROSA,
2008, p.109).
Ressalta-se ainda que, dentre os programas analisados, 9,8%
dos docentes publicaram abaixo da mdia indicada pela CAPES,
o que pode sinalizar concentrao da produo cientfca em
determinados grupos.
Ao observar a mdia individual e a mdia geral da produo
cientfca dos programas, evidencia-se no Grfco 1 que as mdias
gerais esto prxima s mdias individuais. A mdia da UFMG
levemente superior mdia geral, e as mdias de produo da
UFPE e UFRJ so levemente inferiores mdia geral. Quanto
mdia individual de produo, identifca-se que a da UFMG
ligeiramente superior s mdias da UFRJ e UFPE. Quanto
disperso, identifca-se que a UFPE apresenta maior disperso,
a UFRJ a menor disperso, e a UFMG maior disperso que a
UFRJ e menor que a UFPE.
237
E
m

Q
u
e
s
t

o
,

P
o
r
t
o

A
l
e
g
r
e
,

v
.

1
8
,

E
d
i

o

E
s
p
e
c
i
a
l
,

p
.

2
3
1

-

2
4
7
,

d
e
z
.

2
0
1
2
.
Grfico 1 Mdia individual e geral por programa de ps-
graduao
Fonte: Dados da pesquisa.
Quanto categoria de anlise denominada incentivo, alm
da vinculao ao credenciamento do docente ao programa, muitas
vezes utilizada a distribuio carga horria dos docentes, porm
no foi identifcada a existncia de regras estabelecidas pelas re-
feridas instituies especifcando que, se os docentes possurem
uma elevada produo cientfca, haver uma reduo da carga
horria destinada a aulas. Talvez seja um acordo de cavalheiros,
porque isso visvel, principalmente nas falas dos 7,7% de do-
centes da UFRJ, quando ressaltam que: ns temos um critrio
aqui, interno dos professores: quem tem maior produtividade tem
uma reduo de encargos didticos, e isso tem sido um estmu-
lo. (UFRJ, Docente 10, Docente 23, Docente 24, Docente 25,
Docente 26, Docente 29, Docente 33, Docente 39, Docente
43, Docente 62, Docente 64, Docente 69).
Alm dos incentivos citados, existe tambm a progresso
funcional do docente. Esta, mencionada pelo docente da UFRJ,
que afrmou: ns temos avaliaes internas, progresses, elas so
baseadas na sua produo. (UFRJ, Docente 69). Vale ressaltar
que as normas internas para progresso das referidas instituies
no estabelecem um quantitativo para a produo cientfca. S
a Resoluo 04/2008 da UFPE, que determina que o mximo
de produo cientfca pontuada at trs produes, o que pode
ser tambm caracterizado como um incentivo ao aumento da
238
E
m

Q
u
e
s
t

o
,

P
o
r
t
o

A
l
e
g
r
e
,

v
.

1
8
,

E
d
i

o

E
s
p
e
c
i
a
l
,

p
.

2
3
1

-

2
4
7
,

d
e
z
.

2
0
1
2
.
produo cientfca (UNIVERSIDADE..., 2008).
Quanto categoria de anlise denominada controle da pro-
duo cientfca, identifcou-se nas falas dos coordenadores que se
utilizam de outras formas, alm do credenciamento, que podemos
tomar como incentivo e controle da quantidade e qualidade da
produo cientfca, como a citada pelo docente coordenador da
UFMG, que mencionou [...] enviamos esporadicamente, depois
da avaliao, revistas que so A1, A2, que deveramos procurar
publicar mais [...] (UFMG, Docente Coord. 51). J, entre os
docentes das referidas instituies, 11% afrmaram que o controle
feito da seguinte forma: [...] obrigado a fazer relatrio anual-
mente, manter sempre o Lattes atualizado e, no fnal de cada ano,
essa informao vai para o banco de dados da CAPES (UFMG
Docente 9, Docente 12, Docente 21, Docente 26, Docente 29,
Docente 40, Docente 41, Docente 42, Docente 48, Docente 50
e Docente 56; UFPE Docente 3, Docente 5, Docente 6, Docente
7, Docente 9, Docente 12, Docente 14, Docente 20, Docente 21
e Docente 30; UFRJ Docente 1, Docente 4, Docente 5, Docente
8, Docente 9, Docente 17, Docente 20, Docente 22, Docente
23, Docente 24, Docente 25, Docente 27, Docente 28, Docente
29, Docente 32, Docente 33, Docente 34, Docente 38, Docente
44, Docente 45, Docente 49, Docente 52, Docente 55, Docente
57, Docente 63, Docente 65 e Docente 67).
Pode-se inferir que existe claramente incentivo e controle
da produo cientfca para manter um programa conceito sete
(7) na CAPES. Muitas vezes esse incentivo est condicionado
vinculao do docente ao referido programa de ps-graduao;
diminuio de carga horria dedicada a aulas; assim como pro-
gresso do docente, e ao controle atravs de relatrios peridicos.
Como o estudo analisa os artigos publicados em peridicos,
abordaremos os ttulos dos peridicos que divulgam o conhe-
cimento produzido pelos docentes das instituies envolvidas.
Foram identifcados 312 ttulos, dos quais 23 possuem no mnimo
10 artigos publicados no perodo estudado, representando 568
ocorrncias.
Identifcou-se que o peridico Physical Review, B Condensed
Matter and Materials Physics (Qualis B1) apresenta uma ocorrncia
de 100 artigos no perodo. No que se refere s publicaes nacio-
nais, o peridico Brazilian Journal of Physics (Qualis B5) apresenta
uma ocorrncia de 21 artigos no perodo, e vale salientar que 18
so da UFRJ, o que leva a crer que os docentes da referida insti-
tuio tm a preocupao de publicar em peridicos nacionais.
Assim, alguns docentes criticaram a poltica da CAPES, alertando
para manuteno das revistas nacionais:
as revistas nacionais so consideradas de pouca qualidade, e a
CAPES coloca arbitrariamente dentro do Qualis A ou B [...] ns
239
E
m

Q
u
e
s
t

o
,

P
o
r
t
o

A
l
e
g
r
e
,

v
.

1
8
,

E
d
i

o

E
s
p
e
c
i
a
l
,

p
.

2
3
1

-

2
4
7
,

d
e
z
.

2
0
1
2
.
temos que manter essas revistas vivas, mas essa poltica errada
[...] A CAPES tem que ser realmente criteriosa e usar apenas critrios
tcnicos e no s poltica [...] (UFMG, Docente 26).
[...] importante ter revistas nacionais prestigiadas [...] seria bom
que tivesse mais revistas nacionais bem qualificadas para estimular
no apenas a nossa pesquisa, mas tambm o desenvolvimento
dessas revistas [...] (UFMG, Docente 43).
As falas dos respectivos docentes demonstram a preocupao
em manter as revistas nacionais vivas, estimulando a qualidade
das mesmas com uma poltica que defna critrios e os explicite.
Por outro lado houve o cuidado de identifcar o Qualis dos
312 ttulos de peridicos, com o objetivo de constatar em qual
categoria Qualis os pesquisadores de Fsica publicam, como revela
a pesquisa. Aps a verifcao dos respectivos Qualis no site da
CAPES, observou-se que a maioria das publicaes encontra-se
nas revistas Qualis B1 (26%) e B2 (21%).
Grfico 2 Qualis dos peridicos utilizados para publicar
(UFMG; UFPE; UFRJ 2007-2009)
Fonte: Dados da pesquisa.
Ao analisar o Qualis dos peridicos utilizados pelas institui-
es estudadas, evidenciou-se que se mantm a predominncia
principalmente de publicar nos peridicos classifcados como B1.
A esse respeito os docentes dizem que publicam em mdia em
peridicos Qualis B, devido sua audincia ser mais especfca,
acarretando alguns confitos, como afrmam 5,1% dos docentes:
Na ps-graduao em Fsica no Brasil a publicao mdia em
Qualis B; nem sempre os docentes em Fsica publicam em revistas
que tenham ampla audincia, s vezes voc tem um fator de
impacto baixo, mas no porque o peridico de baixo nvel, mas
porque ele tem uma audincia restrita, e isso a CAPES no leva em
conta. Uma coisa que impede a comunidade de fsicos no Brasil
exatamente o risco que tem de no poder ousar. Ento isso um
problema estrutural que est impedindo que a cincia no Brasil
avance realmente em termos de qualidade, em que o docente
possa gastar mais tempo em um projeto de pesquisa, possa ousar
buscando ser mais criativo, buscando ideias que corram riscos,
240
E
m

Q
u
e
s
t

o
,

P
o
r
t
o

A
l
e
g
r
e
,

v
.

1
8
,

E
d
i

o

E
s
p
e
c
i
a
l
,

p
.

2
3
1

-

2
4
7
,

d
e
z
.

2
0
1
2
.
porque, seno, continuaremos a fazer o arroz com feijo (UFMG,
Docente 11 e Docente 24; UFPE, Docente 3 e Docente 14; UFRJ,
Docente 2, Docente 20, Docente 38 e Docente 45).
O dado supracitado foi constatado no Relatrio de Avalia-
o 2007-2010 da CAPES, pela evoluo dos indicadores, com
tendncias, das quais se destacam:
Para programas com conceito 5 a 7, h uma clara concentrao
de publicaes em Qualis B1. Isto reflete o fato de que a rea de
Fsica da Matria Condensada, que mais nmeros, tem suas
principais revistas classificada neste indicador. (COORDENAO...,
2011, p. 14)
No entanto, identifca-se a existncia de docentes que pu-
blicam em revistas que no possuem Qualis (foi apresentado
anteriormente que 4% publicam em revistas no qualifcadas
pela CAPES), mas isso no pode nem deve ser minimizado. As
revistas s adquirem Qualis aps terem sido indicadas nos relat-
rios dos programas, por isso importante publicar nas mesmas.
Enquanto isso no ocorre, algumas revistas com qualidade podem
permanecer com classifcao inferior (ou sem), como afrma o
docente da UFMG:
[...] uma revista s entra no Qualis se os docentes publicam
nela. Ento meio a histria do ovo e da galinha, quem veio
primeiro? Se voc publica, ela vai ser qualificada para Qualis,
e, se voc no publica, ela no vai entrar no Qualis [...]. Ento
prefiro escolher revistas de boa qualidade, e que sejam indexadas
internacionalmente. (UFMG, Docente 4).
Associa-se tambm a este fato a inexistncia de peridicos
com Qualis em determinadas reas da Fsica. A esse respeito os
docentes afrmam que a classifcao no Qualis depende da rea
analisada. A CAPES classifcou para rea de Astronomia/Fsica
um total de 89 peridicos Qualis A1 e A2. Apesar de ser um
nmero de revistas considervel, h casos em que os referidos
docentes precisam publicar em outras reas, e muitas vezes estas
s possuem Qualis B ou C, ou em uma determinada rea que
possui um Qualis elevado, mas, quando classifcada na Fsica,
encontra uma classifcao menor. Ento, a transdisciplinaridade
tem sido um problema quando da publicao, razo porque 9%
dos docentes ressaltam:
Tem algumas reas que esto sendo prejudicadas com essa
classificao. A classificao no pode ser puramente com base no
fator de impacto, e deve ser feita com bastante cuidado porque
as reas so muito heterogneas. Outra questo que se publica
com o colega da Qumica, em que classifica certa revista com o
Qualis maravilhoso, a, quando se preenche aqui na Fsica, o Qualis
horroroso. o mesmo trabalho, cincia, s porque passou de
uma rea para a outra o Qualis caiu?! (UFMG, Docente 12, Docente
20, Docente 40, Docente 50; UFPE, Docente 1, Docente 6; UFRJ,
Docente 33 e Docente 44).
Muitas vezes o docente procura publicar em revistas ade-
241
E
m

Q
u
e
s
t

o
,

P
o
r
t
o

A
l
e
g
r
e
,

v
.

1
8
,

E
d
i

o

E
s
p
e
c
i
a
l
,

p
.

2
3
1

-

2
4
7
,

d
e
z
.

2
0
1
2
.
quadas temtica abordada, ou em revistas mais lidas, ou sim-
plesmente em revistas mais importantes na rea, apesar de no
possurem Qualis, como afrmam 13% dos docentes:
A escolha da revista determinada pelo contedo do trabalho.
Procuramos revistas mais lidas da nossa rea, que no so
necessariamente Qualis A. Em geral somos estimulados pela
visibilidade que aquele jornal tem, e que vai dar ao trabalho, ou
seja, o fato de ser publicado como Qualis A, e a CAPES considerar
isso como bom, uma consequncia boa, algo bom para o
programa e bom para o docente (UFMG, Docente 8, Docente
21, Docente 26, Docente 32, Docente 35 e Docente 56; UFPE,
Docente 3, Docente 12, Docente 14, Docente 20 e Docente 21;
UFRJ, Docente 4, Docente 7, Docente 20, Docente 23, Docente 32,
Docente 40, Docente 45, Docente 55 e Docente 66).
Quanto ao tamanho da comunidade, salienta-se que, quanto
menos abordada a temtica, menos publicaes ter, consequen-
temente interferindo no fator de impacto e na classifcao do
Qualis. Portanto, deve ser considerado o tamanho da comunidade
para se defnir o Qualis, justifcado pela necessidade de interagir
com os pares que esto trabalhando na mesma temtica, e no
de publicar em revistas que so mais abrangentes, s porque tm
Qualis A, e, no entanto, o trabalho no ser lido.
Alguns docentes afrmam, tambm, que ao enviarem artigos
para publicao observam outros critrios que no o Qualis,
como, por exemplo: apresentao de processos de referees,
que tenham respaldo da comunidade cientfca, parmetro de
impacto, ou peridicos citados. Estes so tambm critrios que
constam do sistema Qualis.
H difculdade natural em publicar em peridicos Qualis
A1 e A2, devido aos rigores de submisso das revistas, alm da
temtica abordada que pode ou no se enquadrar no escopo das
revistas, ou pode ser uma rea nova. Outra difculdade o tempo
de maturao das pesquisas, at que os resultados estejam conso-
lidados para serem publicados em revistas Qualis A, difcultando
a publicao. Assim, 6,4% dos docentes afrmam:
Ao particionar os peridicos de Qualis A, B ou C, a Fsica, em
particular, fez essa diviso de tal maneira que publicar artigos
em revistas Qualis A muito difcil. Ento, muitas vezes, ns no
mandamos artigos para revistas de Qualis A, porque sabemos
que as chances de no serem aceitos so maiores, ento, ns nos
contentamos com Qualis B. Para publicar em Qualis A exige muito
tempo, uma coisa fora da vida mdia de um docente. No todo
ano que um docente publica um Science, um Nature. Quando se
fala de produo cientfica, a CAPES s avalia a produo cientfica
do programa inteiro, e no de um docente em particular, num
programa voc tem docentes de vrias reas; essas reas so
muito diferentes, algumas so mais jovens, outras mais maduras;
ento, as mais maduras so mais difceis de voc publicar, porque
muita coisa j foi feita; as mais jovens, ou seja, com trabalhos no
muito sofisticados, voc j consegue publicar, porque ela uma
rea jovem, muita coisa por fazer. (UFMG, Docente 27, Docente
28, Docente 44 e Docente 50; UFPE, Docente 26 e Docente 27;
UFRJ, Docente 29, Docente 63 e Docente 65).
Ou seja, os docentes so estimulados a publicar em revistas
242
E
m

Q
u
e
s
t

o
,

P
o
r
t
o

A
l
e
g
r
e
,

v
.

1
8
,

E
d
i

o

E
s
p
e
c
i
a
l
,

p
.

2
3
1

-

2
4
7
,

d
e
z
.

2
0
1
2
.
Qualis A1, apesar de existirem revistas bem conceituadas, e no
classifcadas nesse patamar, ocorrendo tambm o contrrio. O
enquadramento das revistas causa preocupao, em especial o
nmero no Qualis A, com sugesto para voltar ao sistema antigo.
Para essa nova classifcao, a comunidade cientfca foi ouvida,
porm questiona-se se suas sugestes foram acatadas. Com isso,
5,8% dos docentes ressaltam que:
Existem peridicos que esto relacionados como A2, que poderiam,
para Fsica, serem chamados de A1; e existem vrios peridicos
B1 que poderiam ser nvel A; Quando foram definir o Qualis,
a comunidade opinou, mas no se sabe at que ponto isso foi
relevante na deciso (UFMG, Docente 27, Docente 34, Docente
40 e Docente 42; UFPE, Docente 7, Docente 9 e Docente 16; UFRJ,
Docente 26 e Docente 38).
Observa-se tambm que os docentes publicam em peridicos
Qualis A porque [...] na Fsica a concorrncia muito grande
[...] no tem a ver com a CAPES, mas com a competitividade da
Fsica (UFRJ, Docente 39). Ou tambm, como afrmam 4,5%
dos docentes, porque [...] o que mais levado em conta na
hora de avaliao. (UFMG, Docente 29 e Docente 42; UFRJ,
Docente 17, Docente 29, Docente 39, Docente 44 e Docente 57)
Outros 3,2% dos docentes afrmam ainda que:
Existe um incentivo mximo possvel para publicar em Qualis A,
dessa forma sempre se procura mandar para uma revista que
tenha Qualis A, por causa das exigncias da CAPES, a questo
puramente norma, questo de nmeros (UFMG, Docente 6
e Docente 15; UFPE, Docente 7; UFRJ, Docente 1 e Docente 2).
A crtica relativa ferramenta utilizada como um dos fun-
damentos no item de maior valor da avaliao da ps-graduao.
Ao defnir o nvel das revistas, desconsidera-se o tamanho da
comunidade, prejudicando reas, o que leva o docente a publicar
em peridicos com maior abrangncia ao invs da especifcidade,
mas com baixa visibilidade para a temtica, grupos de pesquisa
e docentes especialistas.
Salienta-se que as crticas feitas ao Qualis, de forma geral,
dizem respeito s questes quantitativas, multidisciplinaridade
ou forma de se fazer pesquisa. Assim, 4,6% dos docentes indi-
cam problemas no sistema de avaliao, e ressaltam:
s vezes os critrios so muito numerolgicos a o docente tem
que publicar tantos artigos, em revistas de parmetro de impacto
acima de tanto; Tem todo um conjunto de critrios, que a ps-
graduao se baseia, e acaba sugerindo aos docentes seja para se
manter no programa, obter uma boa pontuao na CAPES, ganhar
em nmero de bolsas, tem toda essa histria; existem imensas
contradies; nem ligo para o Qualis, embora eu saiba que no
futuro eu possa at ser penalizado; discordo dessa numerologia,
e dessa qualificao, ento eu continuo publicando na revista que
tradicional e que sempre as pessoas da minha rea publicaram;
a avaliao muito numrica, Qualis A o nico que serve e se
esquece um pouco das caractersticas do docente, ou a gente
faz o que querem ou a gente perde; s vezes a coisa tem que ser
um pouco mais subjetiva do que numerolgica, tem que ter um
fator que consiga desvencilhar desses nmeros (UFRJ, Docente 7,
Docente 17, Docente 22, Docente 52 e Docente56; UFPE, Docente
243
E
m

Q
u
e
s
t

o
,

P
o
r
t
o

A
l
e
g
r
e
,

v
.

1
8
,

E
d
i

o

E
s
p
e
c
i
a
l
,

p
.

2
3
1

-

2
4
7
,

d
e
z
.

2
0
1
2
.
12; UFMG, Docente 48).
Deve-se tambm levar em conta que a CAPES considera
como publicaes qualifcadas aquelas constantes do Qualis
Peridicos e com fator de impacto. O documento Regulamento
para a Avaliao Trienal 2010 da CAPES enfatiza que para nota
6 ou 7 o programa deve apresentar:
[...] insero e/ou padro de desempenho internacional (nvel
de qualificao, de produo e de desempenho equivalente ao
dos centros internacionais de excelncia). Produo cientfica
publicada em peridicos pertencentes aos estratos mais elevados
do Qualis Peridico da rea condio necessria, mas de
modo algum assegura, de per se, a atribuio de nota 6 ou 7.
(COORDENAO..., 2010, p. 13)
Outro fato a ser levado em considerao quanto manipu-
lao do quadro docente, que algumas vezes defnido de forma
artifcial para elevar a mdia da produo cientfca. Esse fato
ressaltado por 2% dos docentes, ao afrmarem que:
muito importante que exista avaliao da produo cientfica, o
que um pouco estranho a maneira como definido o quadro
da ps-graduao. Muitas vezes os programas definem o quadro
docente da ps-graduao justamente para ter uma mdia, para
tornar a mdia mais elevada. A mdia definida com o nmero de
publicaes dividido pelo nmero de professores do quadro da ps-
graduao, ento reduz o denominador dessa frao, e a mdia
vai aumentar. Eventualmente pode-se manipular, se a CAPES faz
um critrio puramente numerolgico, quantitativo, de nmero de
artigos sem olhar a qualidade das revistas; h pontuao indevida
para publicao de acordo com a rea. mope essa maneira de
categorizar as coisas. Ento, eles querem uma forma de avaliao
na qual se possa decidir se tal departamento conforme, ou no,
com os critrios deles. Ento, o problema com isso que h uma
tendncia para acomodar o programa ao critrio. Isso torna o
sistema quase viciado. No sentido que, se em um departamento
cujo corpo docente de ps-graduao fludo, dependendo do
ano, o corpo docente pode contar com mais ou menos pessoas
(UFRJ, Docente 49; UFPE, Docente 5 e Docente 6).
Devem-se estabelecer critrios mais justos, para que no
ocorra futuao no quadro docente, causando instabilidade
entre os prprios docentes. Observa-se tambm que os referidos
docentes publicam em reas correlatas como a fsica-matemtica,
qumica, farmcia, mineralogia, odontologia, etc., sem necessa-
riamente possurem Qualis A. Ou seja, visualiza-se que a poltica
de avaliao da CAPES necessita de correes, principalmente na
questo quantitativa, que limita e enquadra o docente, obrigando-
o a publicar em peridicos que so considerados de qualidade,
mas, no entanto, no possuem abrangncia na rea da pesquisa.
Os docentes publicam em colaborao, seja na prpria rea,
ou em reas correlatas. Das 1.037 referncias analisadas, 3,5% so
artigos de autoria nica, e 96,6% so artigos de autoria mltipla,
e algumas autorias coletivas institucionais. Verifca-se o incentivo
da publicao em colaborao: do total de docentes (n=152) das
instituies analisadas, apenas 14,4% publicaram em autoria
nica nos anos de 2007-2009.
244
E
m

Q
u
e
s
t

o
,

P
o
r
t
o

A
l
e
g
r
e
,

v
.

1
8
,

E
d
i

o

E
s
p
e
c
i
a
l
,

p
.

2
3
1

-

2
4
7
,

d
e
z
.

2
0
1
2
.
Deve-se lembrar das grandes colaboraes. Segundo relata
um dos entrevistados, existe [...] incentivo para aumentar a
colaborao internacional, do aluno participar, fazer seminrios
internacionais. Muitos alunos foram para fora para aprender.
(UFMG, Docente 6). Apesar da CAPES na avaliao desconsi-
derar as publicaes em grandes colaboraes, ela estimula a
participao, seja nacional ou internacional. Ao defnir grandes
colaboraes, os docentes consideram aquelas que envolvem
instituies nacionais, internacionais, com grandes repercusses,
como defnido por 1,3% dos docentes, ao afrmarem:
Tem muita gente que trabalha na rea de partcula de altas
energias que tem o LHC
1
, as publicaes nessa rea so com mil
autores, e o que a CAPES faz hoje em dia no contabilizar essas
publicaes; tem um grupo grande de docentes envolvidos em
grupos de pesquisa em colaboraes internacionais. As pessoas
que trabalham no CERN publicam muito e a CAPES, na hora da
avaliao, desconsidera as publicaes desse grupo, mas no
desconsidera os docentes, ento eles entram s no denominador
e, como o grupo aqui de colaborao de partculas cresceu muito,
isso tem pesado negativamente dentro da CAPES, ento esse um
critrio que no pertinente, ou se coloca no numerador e no
denominador ou tira dos dois (UFRJ, Docente 64 e Docente 66).
A esse respeito o Relatrio de Avaliao 2007-2010 afrma
que [...] as publicaes relativas a grandes colaboraes no
foram consideradas no clculo das mdias, no entanto, isto
no penalizou nenhum programa [...] (COODERNAO...,
2011). Porm os docentes se sentem injustiados pela avaliao
pautada apenas em nmeros, desconsiderando a contribuio
dada na construo do conhecimento, por se tratar de avaliao
puramente quantitativa, sem levar em considerao a qualidade
do trabalho, ou mesmo sem identifcar qual a participao do
docente no trabalho.
Observa-se que os docentes entrevistados ainda no possuem
um consenso, mas em um ponto eles convergem: a avaliao no
deve ser puramente baseada em nmeros; e que a avaliao de
trabalhos em grandes colaboraes deve ser revista, considerando
os docentes que participaram dessa produo.
Ainda com relao questo das grandes colaboraes, vale
ressaltar que, nos documentos que orientam os consultores para
a avaliao, como a Ficha de Avaliao 2008-2010 (Programas
Acadmicos), e o Documento de rea 2009 rea de Avaliao:
Astronomia/Fsica, no se encontram as razes para que essa pro-
duo cientfca em grandes colaboraes seja desconsiderada na
avaliao. Neste caso existe um contrassenso, porque, ao mesmo
tempo em que a Ficha de Avaliao 2008-2010 (Programas Aca-
dmicos) coloca que essencial a [...] integrao e cooperao
com outros programas e centros de pesquisa e desenvolvimento
profssional relacionados rea de conhecimento do programa,
com vistas ao desenvolvimento da pesquisa e da ps-graduao
2
CERN - Laboratrio Europeu
para a Fsica de Partculas. (DA-
MAZIO; SIXAS, 1999)
1
LHC (Large Hadron Collider)
- Projeto que consiste de um
grande acelerador de partculas,
que produz a coliso entre nuvens
de prtrons (~ prtons em cada
nuvem) a cada 25 nanossegundos.
(DAMAZIO; SIXAS, 1999)
245
E
m

Q
u
e
s
t

o
,

P
o
r
t
o

A
l
e
g
r
e
,

v
.

1
8
,

E
d
i

o

E
s
p
e
c
i
a
l
,

p
.

2
3
1

-

2
4
7
,

d
e
z
.

2
0
1
2
.
[...], essa produo cientfca no contabilizada. Aqui se enten-
de como centros de pesquisa os laboratrios com cooperao que
envolve vrios pesquisadores de vrios pases e onde a produo
cientfca composta, muitas vezes, por mais de 1.000 autores
(COORDENAO..., 2009).
Talvez seja necessrio repensar essa questo, encontrar
mecanismos de comprovao da participao e importncia do
docente na pesquisa e, por conseguinte, na produo cientfca,
como especifca um dos entrevistados da UFRJ: Grandes cola-
boraes devem ter uma anlise mais fna, baseada principalmente
na importncia que o docente tem naquela colaborao. Existem
pessoas consideradas importantes na colaborao como lderes; e
tem pessoas que no fazem muita coisa [...] (UFRJ, Docente 24).
Esses dados evidenciam o interesse em publicar em colabo-
rao, em atendimento s recomendaes da CAPES, que esti-
mula inclusive a colaborao entre professor orientador e aluno
orientando. Nesse sentido, no Documento de rea 2009 rea
de Avaliao: Astronomia/Fsica, especifcamente a fcha de avalia-
o, a CAPES considera tanto o percentual de discentes autores,
quanto a pontuao Qualis dos peridicos, alm de estabelecer
relao entre a produo discente e a produo total do programa
(COODENAO..., 2008).
4 Consideraes finais
Os resultados levam a inferir que existe incentivo e controle
da produo cientfca das referidas instituies. Consequen-
temente, seus docentes so produtivos, e essa produtividade se
associa a exigncias seja dos programas, como requisito para
credenciamento, seja da CAPES para classifcao do programa.
Em sua maioria, eles publicam em peridicos Qualis B, e tm
sempre a preocupao de publicar em revistas que sejam lidas
por seus pares, que tenham visibilidade, sem muita preocupao
com Qualis A.
Observa-se tambm que existe preocupao quanto questo
da avaliao baseada em nmeros, que muitas vezes prejudica
programas, ou mesmo reas. E, por fm, sugerem mudanas no
formato da avaliao, que sejam utilizados dados quantitativos,
mas que sejam tambm observados os qualitativos, identifcando
a qualidade dos artigos atravs das citaes, excluindo as autoci-
taes, identifcando o papel que o docente teve naquele artigo,
quando participa em grandes colaboraes.
importante que se leve em considerao tambm o tama-
nho da comunidade ao se estabelecer a classifcao das revistas.
Assim ser possvel estabelecer critrios mais justos, que no
246
E
m

Q
u
e
s
t

o
,

P
o
r
t
o

A
l
e
g
r
e
,

v
.

1
8
,

E
d
i

o

E
s
p
e
c
i
a
l
,

p
.

2
3
1

-

2
4
7
,

d
e
z
.

2
0
1
2
.
privilegiem nem docentes, nem programas, apresentando uma
avaliao mais equilibrada.
Conclui-se que no contexto atual, a avaliao da CAPES
apresenta problemas, necessitando que os instrumentos sejam
revistos, observando-se as questes qualitativas, quantitativas,
e levando em considerao os fatores peculiares das reas. Por-
tanto, ao se avaliar uma rea, um dos critrios a ser observado
o tamanho das comunidades, pois estas se organizam de forma
diferenciada e, quando se trata de temticas pouco pesquisadas,
podem ter visibilidade ou no, e podero ser prejudicadas em
prol da quantidade de docentes envolvidos.
A Cincia da Informao, por sua vez, poder se utilizar
da metodologia e dos resultados deste estudo, no sentido de
identifcar os reais motivos pelos quais a rea no possui ainda
programas com conceito sete.
Scientific production: reflections of
assessment in postgraduate programs in
physics
ABSTRACT
Based on the analysis of the scientific literature in graduate pro-
grams in the field of Physics at the Universities Federal de Minas
Gerais (UFMG), Pernambuco (UFPE) and Rio de Janeiro (UFRJ), in
the period 2007-2009 it used methodological triangulation to
contemplate easing of quantitative methods, bibliometric and
scientometric for scientific production, with qualitative and inter-
pretive content analysis, for interviews. The main results found
the existence of incentive instruments and control of scientific
production in these institutions, the predominance of teachers
work published in journals that are well regarded by the scientific
community and are well ranked, according to the classification
system of agency promotion (Qualis B); concern predominance
of evaluation of scientific literature, in a purely quantitative, and
policy assessment CAPES the time that encourages, pushes rese-
archers through documents to a context of scientific productivity.
KEYWORDS: Physics. Graduate program (brazilian universities).
Scientific comunication - assessment. Bibliometrics.
Referncias
BARDIN, L. Anlise de contedo. Lisboa: Edies 70, 2008.
COORDENAO DE APERFEIOAMENTO DE
PESSOAL DE NVEL SUPERIOR. DIRETORIA DE
AVALIAO. Documento de rea 2009. Braslia, 2009.
Disponvel em: <http://qualis.capes.gov.br/arquivos/avaliacao/
webqualis/criterios2007_2009/Criterios_Qualis_2008_03.
pdf>. Acesso em: 12 de jan. 2011.
______. Regulamento para a avaliao trienal 2010 (2007-
2009). Braslia, 2010. Disponvel em: <http://trienal.capes.
gov.br/wp-content/uploads/2010/07/REGULAMENTO-
PARA-A-AVALIA%C3%87%C3%83O-09jul10.pdf>. Acesso
em: 12 de jan. 2011.
247
E
m

Q
u
e
s
t

o
,

P
o
r
t
o

A
l
e
g
r
e
,

v
.

1
8
,

E
d
i

o

E
s
p
e
c
i
a
l
,

p
.

2
3
1

-

2
4
7
,

d
e
z
.

2
0
1
2
.
______. Relatrio de Avaliao 2007-2009: trienal 2010.
Braslia, 2011. Disponvel em: <http://trienal.capes.gov.br/
wp-content/uploads/2011/01/ASTRONOMIA-E-FSICA-
RELATRIO-DE-AVALIAO-FINAL-jan11.pdf >. Acesso
em: 12 de jan. 2011.
CORREIA, A.E.G.C. O Fluxo da informao no processo
de pesquisa na UFPE: as infuncias das tecnologias da
informao e comunicao. 2006. 176 f. Dissertao
(Mestrado em Cincia da Informao) -- Universidade
Federal de Santa Catarina, Florianpolis, 2006. Disponvel
em: <http://pgcin.paginas.ufsc.br/fles/2010/10/CORREIA-
Anna1.pdf>. Acesso em: 29 dez. 2008.
DAMAZIO, D. O. ; SEIXAS, J. M. Um Discriminador
de partculas de altas-energias baseado em um calormetro
projetivo. In: BRAZILIAN CONFERENCE ON NEURAL
NETWORKS, 4.; CONGRESSO BRASILEIRO DE
REDES NEURAIS, 4., July 20-22, 1999, So Jos dos
Campos. Proceedings So Jos dos Campos, SP: ITA,
1999. p. 888-999.
LUZ, M. T. Prometeu acorrentado: analise sociolgica
da categoria produtividade e as condies atuais de vida
acadmica. Physis: revista de Sade Coletiva, Rio de Janeiro,
v.15, n.1, p.39-57, 2005.
ROSA, A. R. Ns e os ndices: um outro olhar sobre a presso
institucional por publicao. Revista de Administrao de
Empresas, So Paulo, v. 48, n. 4, p. 108-114, out./dez. 2008.
Disponvel em: <http://www.scielo.br/scielo.php?pid=S0034-
75902008000400010&script=sci_arttext>. Acesso em: 17 nov.
2009.
UNIVERSIDADE FEDERAL DE PERNAMBUCO.
Conselho Universitrio. Resoluo n 04/2008. Boletim
Ofcial, Recife, v. 43, nesp. 80, p. 5-17, dez. 2008.
______. Manual da Ps-Graduao. Recife, 2011. Disponvel
em: <http://www.ufpe.br/ppgfsica/images/documentos/
manualpg-foto3.pdf>. Acesso em: 21 out. 2011.
Anna Elizabeth Galvo Coutinho
Correia
Doutora em Cincias da Informao pela
Universidade Federal de Minas Gerais.
Professora da Universidade Federal de Pernambuco.
E-mail: aegcc3@gmail.com
Ldia Alvarenga
Doutora em Educao.
Professora titular da Universidade Federal de
Minas Gerais.
E-mail: lidiaalvarenga@eci.ufmg.br
Joana Coeli Ribeiro Gracia
Doutora em Cincia da Informao pela
Universidade Federal do Rio de Janeiro.
Professora da Universidade Federal da Paraba.
E-mail: nacoeli@gmail.com
Recebido em: 01/10/2012
Aceito em: 28/11/2012