Embed Size (px)
Citation preview
2. Indicadores bibliométricos
Publicación científicaFactor de impacto ISI “Journal Citation Report” y SCOPUS. Índice de citas, métricas tradicionales de la publicación
científica y de investigador
http://investigacionupsa.pbworks.com
@nievesglezNieves González
● Impacto de las publicaciones○ Factor de impacto. JCR WoS○ Otras bases de datos en WoS○ Eigenfactor score○ Scopus Elsevier. SJR○ Impacto por publicación al año (media de citas de los artículos) (IPP)○ Source Normalized Impact per Paper (SNIP)
● Impacto de los autores: índice h○ Otras métricas: Latindex, Google Scholar metrics, MIAR, Resh, etc.
● Impacto de las instituciones
¿Qué nivel de conocimientos tenemos con estos indicadores?
DefiniciónAunque no es posible conocer de forma absoluta la calidad de las publicaciones científicas, existen indicadores cuantitativos que permiten valorar de una forma relativa su impacto en la comunidad científica y que son de utilidad para el personal docente e investigador en la acreditación y en la evaluación de los sexenios, etc.
Tradicionalmente se ha medido el impacto de una revista por las citas que recibe y la difusión en bases de datos de relevancia en su área y con representación internacional.
En los últimos años, se ha creado una serie de índices bibliométricos que evalúan la trascendencia de las revistas, incluyendo las nacionales, que concentran las publicaciones de gran parte de nuestros investigadores en Ciencias Sociales y Humanidades.
http://guiasbus.us.es/factordeimpacto
Métricas usadas para evaluar el impacto de la publicaciónFactor de impacto
● Factor de impacto de la publicación: “Nº de citas recibidas en el año actual de las publicaciones de la revista en los dos años anteriores y dividido por el número de artículos publicados por la revista en esos dos años anteriores”.
Métricas usadas para evaluar el impacto de la publicación
Factor de impacto
Es un indicador que permite comparar revistas y evaluar la importancia relativa de una revista dentro de un mismo campo científico
● Journal Citation Report (JCR) fuente oficial del factor de impacto ○ DORA San Francisco Declaration on Research Assessment (manipulación de datos por las
revistas y no disponibles para el público) ○ Imposibilidad de reflejar el impacto de un artículo en particular.○ Disciplinas con distintos modelos de citas, dificulta la comparación entre campos
Puede consultarlo en: Revistas internacionales: Journal Citation Reports (JCR) Revistas españolas: RESH, Factor de Impacto Potencial de las Revistas Médicas Españolas (2001-2005)
Métricas usadas para evaluar el impacto de la publicaciónFactor de impacto
Lo publica y elabora anualmente Thomson-Reuters y es la principal herramienta utilizada para la evaluación de las revistas científicas.
Existe edición para revistas de ciencias, JCR Science Edition, y de ciencias sociales, JCR Social Sciences Edition. No hay para humanidades y es escaso el número de revistas de lengua no inglesa. Nos permite conocer indicadores como: factor de impacto, índice de inmediatez o cuartil.
Utiliza las citas recogidas en la Web of Science (WOS), una de las principales bases de datos multidisciplinares a nivel mundial, aunque prima la producción científica anglosajona. JCR tiene dos ediciones anuales, una para Ciencias y otra para Ciencias Sociales. El factor de impacto se calcula con los datos de 2 años retrospectivos, aunque existe un Factor de Impacto que amplía la ventana de publicación hasta 5 años atrás.
Métricas usadas para evaluar el impacto de la publicaciónLa aparición de Scopus en 2004 obliga a WoS a competir y crea bases de datos para tipologías diferentes a las revistas: Book Citation Index y Data Citation Index, incluidos en su Core Collection.
También dentro del Core: Emerging Source Citation Index (ESCI, 2015). 56.000 revistas en proceso de evaluación en las que predominan los trabajos en inglés (81%), en español sólo el 7,8%.
Fuera de Core incluye bases de datos como SciELO Citation Index para Latinoamérica (Manual)
Ni SciELO ni ESCI se incluyen en la elaboración de indicadores de impacto o cobertura del JCR
Métricas usadas para evaluar el impacto de la publicación
● No es representativo del índice de citación de los artículos ● Es variable según la disciplina científica ● Es sensible al número y el tipo de trabajos de las revistas ● Puede manipularse por parte de los editores ● Existe un problema con las autocitas ● La ventana de citación de dos años a veces no es suficiente
http://revistas.um.es/reifop/article/view/248241
Métricas usadas para evaluar el impacto de la publicación
En Arte y Humanidades en líneas generales no existen Factores de Impacto (salvo excepciones: historia, lingüística,..) Nos valdrían simplemente las revistas indexadas en el A&HCI de Thomson Reuters
Métricas usadas para evaluar el impacto de la publicaciónOtras métricas para el ranking de las publicaciones
● Eigenfactor score. Ordena las revistas por citas con un algoritmo parecido al de las páginas webs de google. Datos de WoS (Thomson Reuters)
Eigenfactor.org: Portal desarrollado por la Universidad de Washington que ofrece los indicadores Eigenfactor y Article Influence sobre la importancia de revistas científicas basado en la información de citas del Journal Citation Reports. La puntuación Eigenfactor valora la importancia relativa de una publicación para la comunidad científica, de forma que la suma de las puntuaciones de todas las revistas suman 100; sin embargo esta puntuación está influenciada por el tamaño de una publicación medida por el número de artículos anuales publicados (una revista que duplica el número de artículos que publica, duplica igualmente su puntuación Eigenfactor). Article Influence mide la media de la influencia de los artículos de una publicación, por lo que es comparable al factor de impacto del ISI.
http://www.eigenfactor.org/index.php
Scopus (Elsevier)
Scopus: índices de valores de revistas (métricas)
● SJR -desarrollado por SCImago Lab● Impacto por publicación al año (media de citas de los
artículos) (IPP)● Source Normalized Impact per Paper (SNIP)
http://www.journalmetrics.com/ Elsevier Journal metrics
http://emdp.elsevier.com/index.asp Metrics Development Program
Source Normalized Impact per Paper (SNIP)Universidad de Leiden. Compara el impacto de revistas de diferentes campos temáticos, corrigiendo las diferencias en la probabilidad de ser citado que existe entre revistas de distintas materias e incluso entre revistas de la misma área de conocimiento.
Mide el impacto de las citas contextuales basándose en el número total de citas de un determinado campo temático. Pondera el número de citas recibidas con la frecuencia de citas en un área de conocimiento (inmediatez); es decir, en un campo de investigación con una menor frecuencia de citas cada cita tiene un valor superior al de las citas en campos con mayor frecuencia de citas. También se considera la frecuencia con la que citan los autores o la proyección de un área de conocimiento en las bases de datos de referencia.
Puedes consultarlo en: SCImago Journal Rank, Compare Journals, Scopus, JournalMetrics (desde 2007).
Excel "SJR y SNIP 1999-2013" que contiene las métricas de impacto SJR (SCimago Journal Rank) y SNIP (Source Normalized Impact per Paper) de los años 1999 al 2013.
Impacto por publicación al año (media de citas por documento) (IPP)Fórmula del impacto por publicación 2013:
Verano 2014. Scopus y la Leiden University publicaron una nueva métrica a nivel de revista: Impact per Publication (IPP). Indicador similar al FI de Thomson Reuters (sólo 2 años).
Puedes consultarlo en: Compare Journals, Scopus
SCImago Journal Rank (SJR)● Scimago Journal Rank. Datos de Scopus (Elsevier).
Desarrollado por SCImago, grupo de investigación del Consejo Superior de Investigaciones Científicas (CSIC) y de las universidades de Granada, Extremadura, Carlos III (Madrid) y Alcalá de Henares. Con SJR, el área de investigación, calidad y reputación de la revista científica tienen un impacto directo sobre el valor de la cita. Por ello, la cita de una revista con un alto SJR vale más que la cita en una revista con un SJR más bajo.
Este portal analiza, a partir de las revistas incluidas en Scopus, los índices bibliométricos de unas 16.000 revistas. Desde el registro de una revista concreta se puede hacer uso del Evaluador de Revistas (Journals Analyzer), una aplicación en línea que permite comparar simultáneamente y de forma gráfica una revista con otras 10 que se seleccionen. Para cada una de las publicaciones se ofrece en tabla y en gráfico el SJR, el SNIP, el número de citas recibidas, el número de documentos publicados, el porcentaje de artículos no citados y el porcentaje de artículos revisados. Los datos se actualizan bianualmente.
SCImago Journal Rank (SJR)
Está construido como una variación del Eigenfactor, y se inspira en el PageRank de Google para evaluar el impacto de una publicación combinando el número de citas recibidas con la influencia de las publicaciones que la citan. Se calcula utilizando un algoritmo iterativo en el que, partiendo de una puntuación idéntica para cada revista, el conjunto de revistas se redistribuyen las puntuaciones cada vez que se citan entre ellas.
Una vez calculado el prestigio de cada revista, se realiza un proceso de normalización para que el indicador neutralice el tamaño de la revista. De esta forma, se estandariza el patrón de citas entre las diferentes áreas de investigación.
Puedes consultarlo en: SCImago Journal Rank, Scopus
http://guiasbus.us.es/factordeimpacto/sjr
Índice de inmediatezEl índice de inmediatez mide la rapidez con la que se citan los artículos de una revista científica, y permite identificar revistas punteras en investigaciones de amplia repercusión. Se calcula de la siguiente manera: A = B/C
A = Índice de inmediatez de la revista X en 2009B = Número de citas recibidas en 2009 de artículos publicados en la revista X en 2009 C = Número de artículos publicados en la revista X en 2009
Puede consultarlo en:
Revistas internacionales: Journal Citation Reports (JCR) Revistas españolas: Factor de Impacto Potencial de las Revistas Médicas Españolas (2001-2005)
CuartilEl cuartil es un indicador o medida de posición de una revista en relación con todas las de su área. Si dividimos en 4 partes iguales un listado de revistas ordenadas de mayor a menor factor de impacto, cada una de estas partes será un cuartil. Las revistas con el factor de impacto más alto estarán el primer cuartil, los cuartiles medios serán el segundo y el tercero y el cuartil más bajo será el cuarto.100 revistas de una categoría / 4 cuartiles = 25 revistas por cuartil (Q1: 1-25, Q2: 26-
50, Q3: 51-75, Q4: 76-100)Puedes consultarlo en:Revistas internacionales: Journal Citation Reports (JCR), SCImago Journal & Country Rank (SJR). Web of Science
Otros indicios de calidad ESCI
● Si una revista no tiene Factor de Impacto, hay que consultar el Master List de la Web of Science
para saber si está en la base de datos.
● Si no aparece en la WOS, hay que consultar ESCI Emerging Source Citation Index, ofrece
posibilidades de que las revistas acaben entrando en la WOS.
Enlace para descargar el fichero excel. http://bib.us.es/sites/bib3.us.es/files/emerging-source-citation-
index.xlsx
Impacto de las institucionesEssential Science Indicator (ESI Thompson and Reuters)
Cubre 8.500 publicaciones de todo el mundo (Thompson).
● Analiza el rendimiento de la investigación de empresas, instituciones, naciones y publicaciones.
● Clasifica las naciones, publicaciones, científicos, instituciones y empresas principales en función de su campo de investigación.
● Identifica tendencias significativas en las ciencias y ciencias sociales.
● Evalúa empleados, colaboradores, revisores y coetáneos potenciales.
● Determina el resultado de una investigación y el impacto en campos de investigación específicos.
Manual en pdf
Indicadores de impacto de autor
Índice H (Investigador) El índice H de Hirsch es un indicador que se basa en el número de citas recibidas y permite evaluar la producción científica de un investigador. Fue propuesto por Jorge Hirsch, de la Universidad de California, en el año 2005.
● Un científico tiene índice hsi ha publicado h trabajos con al menos h citas cada uno
Permite medir simultáneamente la calidad (en función del número de citas recibidas) y la cantidad de la producción científica y es muy útil para detectar a los investigadores más destacados dentro de un área de conocimiento. Da bastante importancia a la cantidad de publicaciones del autor, valorando de este modo un esfuerzo científico prolongado a lo largo de toda una vida académica.
Se calcula ordenando las publicaciones de un investigador por el número de citas recibidas en orden descendente y a continuación numerando e identificando el punto en el que el número de orden coincide con el de citas recibidas por una publicación.Índice H = 7 (hay 7 publicaciones que han recibido al menos 7 citas cada una)
Puedes consultarlo en: Índice H (autor): Web of Science, SCOPUS; Índice H (revista, país): SCImago Journal & Country Rank (SJR) Razones para tener en cuenta con el índice h (Blog LSE) Índice h en SCOPUS
El índice h BUS
Índice GEl índice h de falta de sensibilidad a los trabajos muy citados centrando el peso en los trabajos académicos más citados.
El índice G es un indicador que, al igual que el H, cuantifica la productividad bibliométrica basada en el historial de publicaciones de los autores. Propuesto por Leo Egghe en 2006, también se calcula a partir de la distribución de citas recibidas por las publicaciones de un investigador determinado. Es similar al índice H, más complejo en su cálculo, pero al ser mayor y más variable, nos permite distinguir entre autores con índice H similar.Se calcula ordenando las publicaciones de un investigador por el número de citas recibidas en orden descendente, numerando la posición, y generando dos nuevas columnas: número de citas recibidas acumulado, y número de posición al cuadrado. A continuación se identifica el número de orden de la posición en la que el número de citas acumuladas es igual o mayor que el número de posición al cuadrado.Un autor tiene un índice de “G” cuando, considerando los “G” artículos más citados de dicho autor, la cantidad de citas acumuladas por estos "G" artículos es superior a "G" al cuadrado.
Índice G = 15 (la cantidad de citas acumuladas por estos 15 artículos más citados es superior a 15 al cuadrado)
Puedes consultarlo en: H Index Scholar
Google Scholar CitationPuede crear un perfil de investigador en Google Scholar con sus publicaciones. Si hace público su perfil, aparecerá visible en Google Scholar, aunque no mostrará nunca su correo electrónico. Proporciona el número de citas y el índice h de sus artículos.
Puede ponerse en contacto con el equipo de Google y enviarles datos de sus publicaciones, reunidas en una página web, a través del formulario. Es posible que pida entrar en su cuenta de gmail.
Existen unas pautas específicas para que los editores de contenidos académicos puedan indexarlos en Google Académico.
http://guiasbus.us.es/perfilesdeautor/googlescholarcitations
http://bib.us.es/sites/bib3.us.es/files/google_scholar_2015.pdf
Google Scholar Metrics (Metrics)
Las revistas indexadas por Google Scholar, que hayan publicado un mínimo de 100 artículos en los últimos 5 años y tengan alguna cita, pueden aparecer en el ranking. Es posible filtrar por idioma (para ver las mejor posicionadas en español) y por materia (con términos ingleses). Google Scholar Metrics ofrece el índice h5, relativo al periodo 2010-2014. Una revista cuyo índice h5 sea 23, indica que entre 2010-2014 ha publicado 23 artículos que han recibido al menos 23 citas cada uno de ellos. Pulsando en el índice h5 de cada revista, podemos ver los artículos más citados y quién los ha citado.
La mediana h5 de una publicación es el número mediano de citas de los artículos que componen el índice h5
https://scholar.google.com/citations?view_op=top_venues&vq=es
Herramientas alternativas
Google Scholar Metrics. Métricas de Google Académico
Índice H de revistas según Google Scholar Metrics:Índice H de las Revistas Científicas Españolas (2010-2014) Índice H de las revistas científicas españolas (2009-2013)Índice H de las revistas científicas españolas (2008-2012)Índice H de las revistas científicas españolas (2007-2011)Índice H de las revistas españolas de Ciencias Jurídicas (2001-2010)Índice H de las revistas españolas de Ciencias Sociales (2001-2010)Índice H de las revistas españolas de Ciencias Sociales y Jurídicas (2002-2011)Índice H de revistas internacionales de Comunicación (2007-2011)Índice H de revistas internacionales de Comunicación (2008-2012)Índice H de revistas internacionales de Enfermería (2007-2011)
Índice h de revistas (GSM)
CIRC 2.0 - La Clasificación Integrada de Revistas Científicas (CIRC) se propone como objetivo la construcción de una clasificación de revistas científicas de Ciencias Sociales y Humanas en función de su calidad, integrando los productos de evaluación existentes considerados positivamente por las diferentes agencias de evaluación nacionales como CNEAI, ANECA). Ha sido elaborado por el grupo EC3. Divide a las revistas en 5 categorías y puede consultarse en su página web (pinchar en Descargar CIRC Excel) y a través de Dialnet, en la información que da una vez que hemos buscado una revista por su título o ISSN. A nivel de usabilidad, es recomendable usar esta última opción.http://www.clasificacioncirc.es/
DICE (No se actualiza desde 2013)- Difusión y Calidad Editorial de las Revistas Españolas de Humanidades y Ciencias Sociales y Jurídicas: Es Fruto de la colaboración entre el CSIC y la ANECA y ha sido elaborado por el Grupo de Investigación "Evaluación de publicaciones científicas en Ciencias Sociales y Humanas" (EPUC) del CSIC. Se incluyen indicadores de calidad como: los mecanismos de evaluación de las revistas, valoración de la difusión en bases de datos, la apertura institucional e internacional de las contribuciones publicadas, el cumplimiento de la periodicidad, el número de criterios Latindex que cumple, así como la categoría que las revistas ocupan en tres sistemas diferentes de evaluación: ANEP (Agencia Nacional de Evaluación y Prospectiva), ERIH (European Reference Index for the Humanities) y CARHUS Plus+ (desarrollado por AGAUR, Agència de Gestió d’Ajuts Universitaris i de Recerca, de la Generalitat de Cataluña). La ANECA utiliza esta base de datos como referencia de calidad de las publicaciones españolas, en sus procesos de evaluación de profesorado. http://dice.cindoc.csic.es/busqueda.php
CIRC 2.0 (EC3) y DICE (CSIC)
H-Index Scholar: (dejó de actualizarse en 2013) Elaborado por el Grupo de Evaluación de la Ciencia y de la Comunicación Científica (EC3) de la Universidad de Granada, H Index Scholar es un índice bibliométrico (aún en versión beta) que pretende medir el rendimiento de la producción académica de los profesores e investigadores de universidades públicas españolas de Humanidades y Ciencias Sociales a partir del recuento de sus publicaciones y de las citas bibliográficas que estas han recibido a través de Google Scholar. Nos permite conocer indicadores como: índice H o índice G.
In-RECJ. (Dejó de actualizarse en 2014) Es un índice bibliométrico que a partir del análisis de las citas de 64 revistas españolas de Ciencias Jurídicas (Derecho Administrativo, Civil y Mercantil, Constitucional, Eclesiástico, Financiero, Internacional, Penal y Procesal, Trabajo y Derecho Romano e Historia del Derecho) permite determinar la relevancia, influencia e impacto científico de las revistas, de los autores que publican en las mismas y de las instituciones a las que estos se adscriben. Nos permite conocer indicadores como: factor de impacto o cuartil.
In-RECS. (Dejó de actualizarse en 2014) Es un índice bibliométrico que a partir del análisis de las citas de 154 revistas españolas de Ciencias Sociales (Biblioteconomía y Documentación, Economía, Sociología, Geografía, Educación, Psicología, Urbanismo...) permite determinar la relevancia, influencia e impacto científico de las revistas, de los autores que publican en las mismas y de las instituciones a las que estos se adscriben. Nos permite conocer indicadores como: factor de impacto o cuartil.
Latindex: es el Sistema Regional de Información en Línea para Revistas Científicas de América Latina, el Caribe, España y Portugal. Reúne información bibliográfica sobre publicaciones científicas seriadas y proporciona criterios de evaluación cualitativos de revistas impresas y revistas electrónicas de gran utilidad en los procesos de evaluación del profesorado.
H-Index Scholar, In-REC*, Latindex
MIAR (Matriu d'Infomació per l'Avaluació de Revistas): Es una base de datos que pretende establecer con periodicidad anual la identificación y evaluación de revistas en las Ciencias Sociales y Humanidades. En la actualidad contiene más de 28.911 títulos. MIAR incluye más de 28.000 publicaciones, para cada una de las cuales se analiza su presencia en bdds y repertorios multidisciplinares y como resultado se obtiene su ICDS. Se actualiza anualmente.
RESH. Sistema de información que reúne indicadores cualitativos y cuantitativos desarrollados por el Grupo de Investigación "Evaluación de publicaciones científicas en Ciencias Sociales y Humanas" (EPUC) del CSIC y por el Grupo de Evaluación de la Ciencia y de la Comunicación Científica (EC3) de la Universidad de Granada. Para una revista en concreto, se indica qué criterios cumple y cuáles no según CNEAI, ANECA y Latindex. En términos generales, se trata de indicadores de calidad editorial, sistema de evaluación de originales, apertura institucional de los órganos de gestión editorial, internacionalidad, etc. También se proporciona el factor de impacto, pero con una ventana de citación de tres años para las revistas de Ciencias Sociales y de cinco años para las revistas de Humanidades. Se ofrecen los datos de impacto más actualizados (2004-2008) y los relativos al periodo anterior (2000-2004) para poder observar la evolución.
ÍNDICES DE VALORACIÓN DE LIBROS Y EDITORIALES CIENTÍFICAS
Publishers Scholar Metrics: Es una herramienta elaborada por el grupo de investigación EC3 para medir el impacto de las editoriales de monografías científicas a partir del total de citas de los libros publicados por el personal docente e investigador de las universidades públicas españolas indizados en Google Académico hasta 2012 en el ámbito de las Humanidades y de las Ciencias Sociales.
SPI (Scholarly Publishers Indicators in Humanities and Social Sciences): Es el resultado de un proyecto de investigación del CSIC para obtener indicadores de calidad para libros y editoriales de carácter científico en Humanidades y Ciencias Sociales. Muestra un ranking de editoriales basado en la opinión de expertos españoles en dichas áreas, de forma general para todas las áreas y especializado por disciplinas.
http://guiasbus.us.es/calidadlibros/editorial
Tabla comparativa entre FI, índice h y Altmetrics(Wacoge, 2016)
BibliografíaWeb de la ULPGC
http://biblioteca.ulpgc.es/factor_impacto
http://www.infobiblio.es/metrica-y-evaluaciones-cientificas-indicadores-y-sitios/
Web de la BUS
http://bib.us.es/sites/bib3.us.es/files/nuevawos_en14_1.pdf
http://ip-science.thomsonreuters.com/m/pdfs/mgr/esi-1005-q-sp.pdf
![Indicadores cgibr-tic-lanhouse2010[2]](https://img.document.onl/doc/110x75/54964ad5b47959654d8b4f51/indicadores-cgibr-tic-lanhouse20102.jpg)
