Estudio analiza el uso de las redes sociales

en la evaluacin del impacto cientfico

En los ltimos aos, el uso de las redes sociales en la comunicacin cientfica viene
aumentando en gran escala, y han sido creadas plataformas especficas para la interaccin e intercambio
de informacin entre investigadores. A pesar el inters creciente de la comunidad acadmica en las redes
sociales como forma de interaccin e intercambio de informacin, se sabe poco al respecto del perfil de uso de
estas herramientas, y acerca de cmo las medidas tradicionales de impacto cientfico basadas en citaciones
(ndices off-line, impacto off-line) se correlacionan con las nuevas medidas de impacto (ndices online, impacto
online).
Un estudio presentado en la 47th Hawaii International Conference on System Sciences (HICSS) en 20141 por
investigadores de la Universidad St. Gallen, en Suiza, evaluaron si y cmo el impacto cientfico puede ser
medido mediante el anlisis de datos de los medios sociales, y cmo este enfoque se relaciona con las
mtricas tradicionales. Segn los autores, las medidas de centralidad de la red2 basadas en los medios
sociales no haban sido consideradas en el contexto de la evaluacin de impacto. Los resultados del trabajo
exploratorio, realizado en una nica institucin, con un nmero pequeo de investigadores, indica que estas
medidas presentan correlacin con mtricas tradicionales de impacto y pueden ser usadas para
complementarlas.
Los Sitios de redes sociales (SRS) se definen como servicios basados en la Web que permiten a los
individuos (1) construir un perfil pblico o semi pblico dentro de un sistema limitado; (2) articular una lista de
usuarios con quien se comparte una conexin, y (3) visualizar y recorrer su lista de conexiones y aquellas
hechas por otras personas dentro del sistema. Ejemplos de SRS son Academia.edu, ResearchGate, y
Mendeley, pues son sitios destinados a la comunidad cientfica y, adems de las funciones mencionadas,
tambin permiten cargar y compartir artculos, apoyar el trabajo de colegas o encontrar literatura relacionada.
Tradicionalmente, el impacto cientfico se mide por mtricas bibliogrficas, como ser las publicaciones y citas
en revistas arbitradas. Entre estos, estn el Factor de Impacto (Web of Knowledge), el Scimago Journal Rank
(Scopus, Elsevier), y el ndice h, los dos primeros enfocados en la publicacin y el ltimo en el investigador
individual. Estas mtricas incorporan numerosas fallas y limitaciones, como ha sido ampliamente discutido en
la comunidad cientfica, inclusive en este blog. Las medidas de citaciones efectivamente reflejan el mrito del

trabajo y su capacidad de pasar por el proceso editorial y de revisin por pares. Sin embargo, el impacto de
una publicacin tambin se refiere al grado de influencia que ella ejerce y, en este caso, las citaciones
constituyen apenas una parte de la medida de esta influencia en la comunidad cientfica y en la sociedad. En
ciertas disciplinas, otras formas de publicacin como libros (en artes y humanidades), informes y manuales
tcnicos (ingeniera), presentaciones y anales de congresos (matemticas, ciencias de la computacin)
suplantan los artculos de revistas, sin embargo no son detectados por la bibliometra tradicional. Adems,
estas mtricas fomentan una cultura de autocitacin y carteles de citacin, descuidando su contexto, o sea,
cmo y por qu ciertos artculos son citados.
A pesar de las limitaciones, las mtricas tradicionales tambin poseen ventajas: permiten comparaciones entre
revistas, disciplinas e instituciones, y son fciles de calcular y de comprender. Sin embargo, hay un consenso
de que el impacto cientfico no puede ser evaluado solo por las citaciones. Los autores demuestran mediante
este estudio que el surgimiento de Internet como espacio para la comunicacin cientfica, complementa el
anlisis del impacto cientfico, enriqueciendo y diversificando su evaluacin.
Existen actualmente en desarrollo mtricas alternativas de impacto cientfico basadas en los medios sociales
como, por ejemplo, Altmetric, que parece ser muy prometedora. Las redes sociales almacenan mucha
informacin y promueven conexiones entre comunidades de investigadores e interesados en general. El
anlisis de estas interacciones permite evaluar el impacto de publicaciones en un aspecto ms amplio que las
mtricas tradicionales. Adems, la altmetra y webometra (mtricas basadas en la Web) pueden ser aplicadas
a nivel del artculo, de la revista o del investigador individual. Altmetric fue adoptado por SciELO Brasil para
acompaar el desempeo de los artculos en las redes sociales.
El Manifiesto Altmetrics hace una compilacin de los objetivos y alcance de esta iniciativa. Sus autores definen
que el impacto est formado por cuatro pilares: uso (acceso y descarga); arbitraje por pares (opinin de
especialistas): citaciones; y el compuesto altmtrico (almacenamiento, links,bookmarks e intercambio). La gran
ventaja, afirman, est en la rapidez con que un artculo es evaluado mediante los medios sociales. En vez de
esperar dos aos o ms para contar citaciones, en apenas una semana los intercambios va Twitter, Facebook,
Linkedin y otros, pueden prever el impacto especfico de un artculo, y no de la revista donde fue publicado.
El estudio de Hoffmann y colaboradores incluy 55 acadmicos de una escuela pblica de administracin de la
Universidad de St. Gallen, en Suiza. Los autores obtuvieron acceso al ResearchGate de los investigadores de
esta institucin entre setiembre de 2012 y febrero de 2013 y evaluaron tres indicadores para analizar las
relaciones entre impacto cientfico online (medio sociales) y off-line (citaciones):
1.

Antigedad: cargo formal, distinciones, premios, participacin en comits editoriales

2.

Impacto de publicaciones: medidas bibliomtricas clsicas como ndice h y factor de impacto de las
revistas, adems del impacto online en SRS, como intercambios, descargas y bookmarks.

3.

Centralidad de la red: medida de cunto un investigador est conectado a otros miembros de la

comunidad cientfica, una indicacin de su importancia e influencia.

Los resultados obtenidos pueden ser resumidos de la siguiente forma:

Al usar ResearchGate para trabajo en red, los investigadores tienden a seguir ms a sus colegas de
la institucin que a establecer nuevos contactos;

En las redes formadas por los acadmicos, los profesores asistentes ocupan las posiciones ms

centrales (esto es, establecen ms conexiones con mayor nmero de colegas), seguidos por los
profesores titulares, doctorados y postdosctorados;
La actividad online (comunicacin online) de los acadmicos se correlaciona fuertemente con las

medidas de centralidad, pero no con el impacto off-line o la antigedad;

Las medidas de impacto online y off-line estn fuertemente relacionadas. Sin embargo, si bien las
medidas off-line est relacionadas con la antigedad, el impacto online est relacionado con la

centralidad de las posiciones que los actores ocupan en la red;

La antigedad est correlacionada con las medidas de centralidad, o sea, el capital social off-line se

expresa tambin en el universo online.

La evaluacin del desempeo de la investigacin cientfica, de instituciones y de revistas hasta hace poco
tiempo se bas casi exclusivamente en medidas bibliomtricas, principalmente las citaciones. En la medida en
surgen nuevas herramientas tecnolgicas, se han propuesto mtricas alternativas para evaluar el impacto
cientfico. El presente estudio seala las limitaciones de las mtricas tradicionales, tales como hacer caso
omiso a los aspectos de las interacciones entre los actores de las redes, y la formacin del capital social para
miembros individuales. Como los medios sociales facilitan el anlisis de red de los investigadores, sera de
esperar que las medidas de centralidad de la red pudieran proporcionar datos sobre la evaluacin del impacto
cientfico.
Este estudio llev a la conclusin de que los acadmicos de la universidad suiza usan las redes sociales ms
en el aspecto de Facebook que en el enfoque de Twitter, o sea, ellos no siguen a muchos de sus colegas,
prefiriendo interactuar con su comunidad de contactos off-line, como colegas de la misma institucin, o con
quienes mantienen colaboracin. As, las redes sociales tienen como finalidad corroborar, ms que la de
establecer contactos.
Como era de esperar, los acadmicos al comienzo de la carreras y por lo tanto ms jvenes ocupan
posiciones ms centrales en las redes de relacionamiento y son ms activos en las comunidades online,
posiblemente en virtud de su deseo de proyeccin en la carrera y de establecer fuertes redes de colaboracin,
lo que puede resultar en mayor impacto en el futuro. En lo que se refiere al impacto de las publicaciones, la
puntuacin en altmetrics encuentra correlacin con la antigedad, ms que con las mtricas off-line
tradicionales, como el ndice h.
Este estudio contribuye al debate apenas iniciado sobre la evaluacin del impacto cientfico y la altmetra.
En esta pequea muestra, el impacto online se correlaciona mejor con la antigedad que con el impacto offline, y el impacto online est fuertemente relacionado con la centralidad en la red. As, las mtricas basadas en
las redes de relacionamiento podran contribuir para elucidar la dinmica de las medidas de impacto cientfico
online y off-line.
De acuerdo con los autores del manifiesto la altmetra est en sus fases inciales; muchas preguntas todava
no fueron respondidas. Sin embargo, dada la crisis enfrentada por los filtros existentes y la rpida evolucin en
la comunidad cientfica, la velocidad, la riqueza y la amplitud de la altmetra vale la pena invertir en esta
iniciativa (traduccin libre) (PRIEM et al 2010).