Академический Документы
Профессиональный Документы
Культура Документы
2017-2018
Biblioteca Universitaria
Sección de Información
NORMATIVA APLICABLE A LOS PROCESOS DE EVALUACIÓN Y ACREDITACIÓN 1
INTRODUCCIÓN 1
ACREDITACIONES DE LA ANECA 1
RECONOCIMIENTO DE TRAMOS DE INVESTIGACIÓN (SEXENIOS) 2
INTRODUCCIÓN 14
GOOGLE SCHOLAR METRICS 14
DICE 15
RESH 16
ERIH 17
CIRC (CLASIFICACIÓN INTEGRADA DE REVISTAS CIENTÍFICAS) 17
SELLO DE CALIDAD FECYT 18
MIAR (MATRIU D'INFOMACIÓ PER L'AVALUACIÓ DE REVISTAS) 19
CARHUS PLUS+ 20
LATINDEX 20
GUÍA DE AYUDA DE LA BIBLIOTECA UNIVERSITARIA 22
INFORME DE CITAS 23
INTRODUCCIÓN 23
CITAS EN WEB OF SCIENCE 23
CITAS EN SCOPUS 26
INTRODUCCIÓN 31
CONSIDERACIÓN DE LOS LIBROS EN LA SOLICITUD DE SEXENIOS 31
OTROS INDICIOS DE CALIDAD EN LIBROS 32
¿QUÉ NO SE CONSIDERAN APORTACIONES VÁLIDAS? 33
BÚSQUEDA DE CITAS 33
PRESTIGIO DE LA EDITORIAL 37
Introducción
La evaluación de la actividad investigadora se basa en la calidad y prestigio de las publicaciones
científicas. Estas siguen siendo el medio de difusión más reconocido por la comunidad científica.
Un resultado positivo en la evaluación, es requisito imprescindible para acceder a cuerpos
docentes universitarios, obtener complementos retributivos (sexenios) o conseguir ayudas para
proyectos de investigación.
Acreditaciones de la ANECA
La Agencia Nacional de Evaluación de la Calidad y Acreditación (ANECA) es una fundación estatal
que tiene como objetivo contribuir a la mejora de la calidad del sistema de educación superior
mediante la evaluación, certificación y acreditación de enseñanzas, profesorado e instituciones.
En esta sección veremos la normativa aplicable a dos de sus programas de evaluación: PEP
y ACADEMIA.
Actualmente, se pueden realizar solicitudes de acreditacion desde la sede electrónica del MECD.
• Información general
• Legislación específica
o Real Decreto 1312/2007 de 5 de octubre
o Real Decreto 415/2015 de 17 de junio
• Guía de ayuda
• Acceso a la herramienta informática
• Orientaciones generales y por áreas (síntesis)
• Marco legal
• Convocatoria: del 17 de diciembre de 2017 al 31 de enero del 2018
• Criterios de evaluación (resolución de 23 de noviembre de 2017, publicada en el BOE
del 1 de dicembre)
• Solicitud
• Criterios comunes y específicos por áreas de investigación
Para calcular el factor de impacto de una revista para una año dado, se tienen en cuanta los dos
años inmediatamente anteriores. En estos, se contabilizan las citas recibidas por la revista y se
dividen por los artículos publicados por la misma.
Por ejemplo, para calcular el factor de impacto de una revista en 2016 procederíamos de la
siguiente manera:
A continuación destacamos los principales aspectos que pueden influir en el factor de impacto:
• No todos los artículos de una revista reciben el mismo número de citas. No es correcto
asignar a todos el mismo impacto.
• No tiene en cuenta el hecho de que cada disciplina tiene una evolución de citas, en el
tiempo, diferente. Asimismo, al tener en cuenta sólo las citas de los 2 años anteriores,
penaliza revistas con artículos citados constantemente en largos periodos de tiempo.
• Las áreas de conocimiento que evolucionan rápidamente y las que están en auge tienen
un índice de inmediatez mucho mayor, lo cual favorece que las revistas incluidas en
dichas categorías tengan un mayor factor de impacto.
• Si una revista publica una cantidad elevada de reseñas en un año, es posible que se
produzca un aumento temporal del número de citas recibidas.
• Los cambios repentinos del tamaño de una revista pueden afectar al factor de impacto.
• El primer año tras el cambio del título de una revista, el nuevo título se muestra sin
factor de impacto.
• Citation stacking: Acuerdo entre dos revistas para citarse mutuamente o cuando el
grueso de citas de una revista proviene de otra.
Si quieres buscar una revista en concreto, puedes buscarla usando el cajetín de búsqueda
rápida, situado en la parte alta del menú de la izquierda.
Otra posibilidad es pinchar en la pestaña Select Journals del mismo menú. En la casilla de
búsqueda, introduce la revista que quieres localizar. De esta forma en la parte inferior, Journal
Citation Reports te ofrecerá aquellas revistas que concuerdan con tu búsqueda. Para finalizar,
simplemente selecciona la o las revistas que te interesen. Este mismo sistema de selección
funciona con la búsqueda por editores o países
Una vez que has lanzado tu búsqueda, en el cuerpo principal de la página obtendrás las revistas
que concuerden con tus criterios. Para ver los datos relativos a una de ellas, simplemente pincha
sobre su título.
En la siguiente pantalla, encontrarás los diferentes datos y métricas que JCR ofrece sobre esa
revista. La métrica Journal Impact Factor es lo que en español denominamos factor de impacto.
Para rellenar tu solicitud, podrás encontrar algunos de los datos fundamentales (categorías a la
que pertenece la revista, posición relativa y cuartil) si pinchas en la pestaña Rank.
Finalmente, recuerda que puede ser consultada desde los campus de la ULPGC o bien desde
fuera de ellos. Para acceder a JCR desde fuera de los campus de la ULPGC debes seguir las
siguientes instrucciones:
• Cuando la revista no tiene factor de impacto el año de publicación del artículo elegimos
el módulo Revistas sin JCR.
Recursos e índices para la valoración de publicaciones periódicas para la acreditación y reconocimiento
de tramos de investigación
8
• Cuando la revista no tiene factor de impacto el año de publicación del artículo, pero en
años posteriores sí lo ha conseguido, elegiremos el módulo Revistas sin jCR, y en el
apartado Otros indicios, incluimos el factor de impacto más cercano al año de
publicación de nuestro artículo.
Tanto el ranking de revistas como el índice de impacto que ofrece esta plataforma se utilizan
cada vez más para evaluar y analizar las publicaciones científicas de cara a las acreditaciones y
evaluación de la actividad investigadora.
SJR combina el número de citas con la influencia de las publicaciones que la citan, es decir, las
citas no valen igual. Esto significa que la cita de una fuente con SJR alto tiene más valor que la
cita de una fuente con un SJR menor. Para el cálculo, usa una ventana de citación de tres años y
restringe las autocitas para que sólo constituyan el 33% del cómputo.
SCImago Journal & Country Rank nos permite realizar diferentes tipos de búsqueda:
• Una vez localizada la revista que queremos consultar, pinchamos sobre el título de esa
revista para acceder a su registro completo.
o Q1 = verde
o Q2 = amarillo
o Q3 = naranja
o Q4 = rojo
Si queremos conocer qué posición relativa ocupa nuestra revista dentro de una categoría
específica, en la página de su registro completo, pincharemos encima de la categoría que
queremos consultar. En el ejemplo que hay a continuación, la revista Political communication
ocupa el puesto 3 de un total de 293 revistas.
JCR SJR
para qué
documentos se da Artículos y revisiones de Artículos, ponencias y
el nº de citas artículos revisiones de artículos
recibidas
Introducción
Tradicionalmente se ha medido el impacto de una revista por las citas que recibe y la difusión
en bases de datos de relevancia en su área y con representación internacional.
En los últimos años, se han creado una serie de índices bibliométricos que evalúan la
trascendencia de las revistas, incluyendo las nacionales, que concentran las publicaciones de
gran parte de nuestros investigadores en Ciencias Sociales y Humanidades.
Pulsando en el índice h5 de cada revista, podemos ver los artículos más citados y quién los ha
citado.
• 2007-2011
• 2008-2012
• 2009-2013
• 2010-2014
• 2011-2015
• 2012-2016
Este mismo grpo de investigación ha publicado otros interesantes informes, tales como Índice H
de las revistas españolas de Ciencias Sociales según Google Scholar, para los periodos 2001-2010
y 2002-2012, o Índice H de las revistas españolas de Ciencias Jurídicas según Google Scholar
(2001-2010).
DICE
DICE, Difusión y Calidad Editorial de las Revistas Españolas de Humanidades y Ciencias Sociales
y Jurídicas, es fruto de la colaboración entre el CSIC y la ANECA y ha sido elaborado por el Grupo
de Investigación Evaluación de publicaciones científicas en Ciencias Sociales y Humanas (EPUC)
del CSIC.
DICE incluye indicadores de calidad como: los mecanismos de evaluación de las revistas,
valoración de la difusión en bases de datos, la apertura institucional e internacional de las
contribuciones publicadas, el cumplimiento de la periodicidad, el número de criterios Latindex
que cumple, así como la categoría que las revistas ocupan en tres sistemas diferentes de
evaluación
RESH
RESH (Revistas Españolas de Ciencias Sociales y Humanidades) es un sistema de información que
integra indicadores de calidad para las revistas científicas españolas de Ciencias Sociales y
Humanidades. Ha sido desarrollado en el marco del proyecto Valoración integrada de las revistas
españolas de Ciencias Sociales y Humanas mediante la aplicación de indicadores múltiples,
financiado por el Plan Nacional de I+D+i.
El objetivo con el que surge es ofrecer un perfil lo más completo posible de las revistas científicas
españolas de Ciencias Sociales y Humanidades que se editan en España a través de indicadores
cualitativos y cuantitativos. RESH está dirigido fundamentalmente a editores de revistas,
investigadores, bibliotecarios y evaluadores de la actividad científica en estas áreas.
Los indicadores que ofrece e integra esta plataforma son, por una parte, aquellos que CNEAI,
ANECA y Latindex tienen en cuenta en sus respectivos sistemas de evaluación (puede
consultarse un listado completo de los indicadores accediendo a este enlace). El usuario podrá
conocer, para una revista en concreto, qué criterios cumple y cuáles no según CNEAI, ANECA y
Latindex. En términos generales, se trata de indicadores de calidad editorial, sistema de
evaluación de originales, apertura institucional de los órganos de gestión editorial,
internacionalidad, etc.
Otro tipo de indicador ofrecido es el de difusión, medido a través de la presencia de las revistas
en bases de datos nacionales e internacionales. Esta información se obtuvo a lo largo del primer
trimestre de 2010, realizando búsquedas y analizando listados de publicaciones indizadas de
bases de datos nacionales e internacionales.
ERIH
ERIH (European Reference Index for the Humanities
and Social Sciences) es un índice de referencia para
las revistas científicas europeas que cumplen
determinados criterios de calidad. Se han hecho
dos evaluaciones, en 2007 y 2011, para las cuales
presentaban unos listados en los que las revistas aprobadas eran agrupadas en tres categorías
(INT, NAT y W). La categoría INT (Internacional) se subdivide a su vez en dos: INT1, INT2.
En 2014 han renovado la web y se ha abierto el plazo para admitir nuevas revistas. Ha añadido
información sobre la política de copyright y autoarchivo de las revistas, algo importante para
conservar los derechos de autor. Con la nueva versión (ERIHPlus), han desaparecido los listados
de las evaluaciones anteriores y ahora sólo indica si la revista está admitida o no, así como su
fecha de inclusión en el índice.
Divide a las revistas en 5 categorías (A, B, C, D Y e) y puede consultarse en su página web. Como
principales características podemos destacar:
• Ahora es mucho más significativo pertenecer al grupo A. Antes para ser A bastaba con
estar indexada en los índices de citas de Web of Science, pero ahora es necesario además
hacerlo en los tres primeros cuartiles del JCR, eliminando así a revistas con bajo impacto
con el riesgo de salir de la categoría.
Las revistas que superen con éxito el proceso de evaluación obtienen el Sello de Calidad FECYT
como reconocimiento de la calidad editorial y científica. Este reconocimiento lo otorga la FECYT
por un periodo de tres años desde la resolución definitiva de la convocatoria correspondiente.
En la web de Evaluación ARCE se pueden consultar el listado de las revistas certificadas por la
FECYT, así como las bases para conseguir el sello de calidad.
MIAR analiza la presencia de una revista en distintas bases de datos y repositorios temáticos,
estableciendo un índice de difusión de la publicación, el ICDS (Índice Compuesto de Difusión
Secundaria) que se ofrece como un elemento más para la elaboración de rankings de
publicaciones de cara a su evaluación cualitativa por expertos.
CARHUS Plus+
CARHUS Plus+ es un sistema de evaluación de
revistas de los ámbitos de Ciencias Sociales y
Humanidades que se publican a nivel local,
nacional e internacional elaborado por la Agència de Gestió d'Ajuts Universitaris i de
Recerca. Además de nutrirse de los productos nacionales e internacionales con índice de
impacto, incluye ERIH y el ICDS de MIAR y añade revistas de lengua y literatura e historia
catalana.
En 2014 se ha publicado una nueva versión, que incorpora el indicador SNIP de Scopus para
ordenar las revistas dentro de las cuatro categorías establecidas (A, B, C y D). Tiene un buscador
para localizar revistas por título, ISSN, materia y clasificación.
Latindex
Latindex es el Sistema Regional de Información en Línea para Revistas Científicas de América
Latina, el Caribe, España y Portugal. Reúne información bibliográfica sobre publicaciones
• Cuartil que ocupa la revista y población total de revistas del área temática.
• Indicar si se publica en una revista fuente.
Informe de citas
Introducción
Las citas suponen un
reconocimiento hacia el trabajo
citado, por lo que se entienden
como un indicio de calidad y se
usan, entre otros factores,
para evaluar la calidad de la
producción científica. Es frecuente
que pidan este dato al solicitar la
acreditación por la ANECA, un
tramo de sexenios, financiación
para un proyecto de investigación...
Al rellenar las convocatorias de Acreditación y Sexenios, debemos tener en cuenta que no todas
las citas tienen el mismo peso. Las citas provenientes de la WoS están muy bien valoradas,
mientras que las citas altmétricas apenas se contemplan.
Otra cuestión importante es que al contabilizar las citas de un documento, tomando como
fuente varias bases de datos, debemos comprobar que son citas diferentes. Se da el caso de que
muchas de las citas recogidas en Scopus y en la WoS para un mismo documento, son citas
coincidentes y hay que tener cuidado de no contarlas dos veces.
Aparte de las bases de datos de carácter multidisciplinar como son Web of Science, Scopus y
Google Académico, hay otras bases de datos especialistas en su área, que ofrecen el dato de las
citas, como MathScinet, Scifinder, bases de datos de Proquest, Pubmed...
WoS es una base de datos de referencias bibliográficas de artículos de revistas, que ofrece el
acceso a resúmenes de autor e índices de citas de más de 12.000 publicaciones internacionales
de mayor impacto. Incluye revistas de acceso abierto, y más de 150.000 actas de congresos. Es
una de las herramientas más importantes para medir el impacto de las publicaciones científicas.
Puedes encontrar más información acerca del contenido y uso de Web of Science en la guía que
ha elaborado la Biblioteca Universitaria.
Una vez que hemos lanzado nuestra consulta, aparecerá la pantalla de resultados, desde donde
podremos ver si los artículos han recibido citas en WoS (incluso podremos ordenar los resultados
obtenidos por este criterio).
Si entramos en el registro completo de los artículos aparece el apartado Red de Citas donde hay
dos opciones para ver documentos relacionados:
• Referencias citadas, permite enlazar con una lista de los artículos que han sido citados
por los autores de este documento.
• Veces citadas, permite enlazar con los artículos que han citado el presente registro.
Citas en Scopus
Scopus es una base de datos bibliográfica de carácter
multidisciplinar que da acceso a más de 53 millones de
registros bibliográficos, en su mayoría con resúmenes.
Facilita, igualmente, índices de citas como el índice H, Scimago Journal Rank (SJR), Source
Normalized Impact per Paper (SNIP), CiteSocre...
Indexa más de 22.000 revistas académicas evaluadas, con actualización diaria, así como más de
150.000 libros.
Puedes encontrar más información acerca del contenido y uso de Scopus en la guía que ha
elaborado la biblioteca Universitaria.
encontradas (con un enlace para filtrarlas), así como un enlace que muestra
únicamente los resultados secundarios (View secondary documents), referidos a
documentos no disponibles pero sí referenciados en Scopus. Finalmente encontrarás un
cajetín de búsqueda para buscar específicamente en los resultados obtenidos (Search
within results...).
Pues bien, desde esta pantalla de resultados de Scopus, ya nos muestra el número de citas que
tienen los documentos.
Si accedemos al registro completo de cada uno de los resultados obtenidos, cada documento
tiene su informe de citas detallado. En la parte superior podrás ver el número de veces que el
documento ha sido citado. Si pinchas sobre el botón View all metrics, accederás a un completo
informe sobre las citas recibidas por el artículo, así como a otras métricas.
El perfil de autor de Scopus incluye el listado de sus publicaciones en esta base de datos, con la
relación de referencias citadas y las que le citan, dentro de esta base de datos. El índice H del
autor se calcula con las publicaciones indexadas en Scopus desde 1970. Ofrece múltiples gráficos
para mostrar las métricas de citas, con un apartado específico para las "altmetrics". Para ver el
informe general de citas debe clicar en Analyze author output o View citation overview.
Una vez que hemos lanzado una consulta, entre los resultados, aparecen las citas recogidas,
detalladas cuando clicamos en ellas. Hay que comprobarlas, para asegurarnos de que no son las
mismas recogidas de diferente manera (por ejemplo, si hay una errata al nombrar el documento,
etc.). Esta búsqueda general incluye libros entre los resultados, si los hubiese.
Es importante tener en cuenta que en las áreas de Ciencias Sociales, Humanidades y Ciencias
Jurídicas, publicar en libros es tanto o más frecuente que la publicación en revistas. Para poder
ser valorados en procesos de acreditación y sexenios, los libros y capítulos de libros deben
reflejar claramente que son fruto de la investigación o de la reflexión bien documentada y que
constituyen una aportación valiosa a su campo temático.
Es muy importante tener en cuenta que los capítulos de libros deben acompañarse,
exclusivamente, de indicios de calidad referidos a la propia aportación. No son válidos los
indicadores relativos a la obra completa o al editor, coordinador o resto de los autores.
Según las últimas convocatorias, no se consideran aportaciones válidas para sexenios las
siguientes:
• Los libros de texto, programas, apuntes o casos prácticos que tengan como
objetivo prioritario servir de material docente.
• Los libros de carácter profesional que, aun siendo fruto de un gran trabajo personal y
de profundas reflexiones basadas en la experiencia, no puedan considerarse libros
de investigación por no incluir aportaciones originales contrastables en relación con el
tema abordado.
• Los libros de carácter profesional que, aun siendo fruto de un gran trabajo personal y
de profundas reflexiones basadas en la experiencia, no puedan considerarse libros
de investigación por no incluir aportaciones originales contrastables en relación con el
tema abordado.
Búsqueda de citas
A modo de ejemplo vamos a localizar citas para Aurora García Ballesteros por su libro de
2004 Inmigración y Sistema Productivo en la Comunidad de Madrid. En nuestro caso,
utilizaremos algunas de las principales bases de datos de carácter multidisciplinar: Web of
Science, Scopus y Google Scholar.
Es importante tener en cuenta que WoS indexa los nombres de los autores siguiendo unos
patrones determinados. Conocerlos puede ayudarle a buscar de la forma adecuada el nombre
del autor, y así asegurarse de recopilar todas las citas recibidas. Puede tomar como referencia
el documento de la FECYT sobre la normalización del nombre de autor.
2. En el listado de resultados, verás el número de documentos, indexados por Scopus, que han
citado el libro. En nuestro ejemplo, han sido 4.
Prestigio de la editorial
Si la evaluación de una revista es un tema que presenta bastantes aristas, el de una editorial es
un tema aún más espinoso.
Para medir el prestigio internacional de una editorial no hay indicadores objetivos establecidos,
por lo que tendremos que aportar detalles significativos por propia iniciativa:
o Contenidos estructurados.
o Buena calidad de impresión.
Sin embargo, a nivel nacional tenemos varias alternativas que veremos a continuación.
A finales de junio de 2012 surge una nueva herramienta que pretende ser un referente en los
procesos de evaluación de las áreas de Ciencias Sociales y Humanidades, SPI (Scholarly
Publishers Indicators), elaborado por el Grupo de Investigación de Publicaciones Científicas
(EPUC) y financiado por el CSIC, nos ofrece un ranking general de editoriales (para 2012 y 2014)
y otro distribuido por materias, según la opinión de 3.000 expertos españoles en estas áreas.
En su primera convocatoria, 29 colecciones han obtenido este sello. Ocho de ellas, han logrado,
además, menciones especiales de internacionalidad, que significa la presencia de autores
extranjeros en ellas.
De esta forma, podemos obtener una perspectiva general de la editorial, revelando además en
qué áreas está mejor posicionada, pero hay que tener en cuenta dos limitaciones importantes:
• Para elaborar el listado de 2014 se han usado datos del periodo 2009-2013.
• Book Citation Index de Web of Science está claramente enfocado al mundo anglosajón,
con gran concentración editorial (solo 18 constituyen la base de datos). No hay
editoriales universitarias y las Ciencias Sociales y Humanidades apenas están
contempladas. En este sentido, SPI puede estar más equilibrado.
Hay cuatro grandes áreas, algunas de las cuales tienen submaterias, para las que se presenta un
listado de editoriales ordenados por los tres indicadores establecidos:
1. Número de libros de una editorial que figuran entre los libros altamente citados de la
muestra.
2. Número total de citas de los libros de una editorial que figuran entre los libros altamente
citados de la muestra.
3. Índice global que relaciona los dos anteriores.
Podemos consultar también un ranking general con las 100 editoriales más citadas.