Evaluación de revistas

Prestigio, indexación e impacto

UNIVERSIDADINTERNACIONALDE LA RIOJA

Grupo EC3

Rafael Repiso @repisogurru

Cómo evaluar una revista científica

1 de septiembre de 2016. Universidad de Medellín

2do Encuentro Regional de Editores de Revistas Académicas

Filosofía Impacto Productos Fraude

¿Por qué nos preocupan tanto las revistas?

Filosofía

Los artículos científicos como elemento de evaluación

Sistemas que se nutren de la evaluación de artículos

- Evaluación de regiones y universidades. Ranking de Universidades, convocatorias de campus de excelencia…

- Evaluación de centros, departamentos, estudios- Evaluación individual. Sexenios y acreditaciones

Docencia

Investigación

Transferencia

Dimensiones por las que se evalúa la universidad

Macro

Meso

Micro

Filosofía Impacto Productos FraudeFilosofía

Filosofía

Históricamente ¿cómo se consideraban las mejores revistas?

Prestigio Editorial

El Peer Review surge cuando la Royal Society of Edinbutgh pide a científicos externos, normalmente de asociaciones de mayor prestigio, evaluar los trabajos entrantes.

Las primeras revistas científicas aparecen junto con las sociedades científicas en el siglo XVII

Filosofía Impacto Productos Indicadores FraudeImpactoFilosofía Impacto Productos FraudeImpacto


Indexación en revistas de resúmenes

Gregorio Marañón recomienda en su obra “La medicina y nuestro tiempo” priorizar la lectura de los trabajos resumidos en este tipo de publicaciones (Marañón, 1969).

Las revistas de resúmenes surgen en el siglo XIX



Impacto medido en Citas

Existe una élite de revistas que lideran la creación e investigación, estas representan el 20% de la población y aglutinan el 80% de las citas.

Eugene Garfield

En los años sesenta aparece Web of Science


¿Cómo se evalúan las revistas?

Evaluación de Revistas

Enfoque Biblioteconómico Enfoque Científico

Utilización Juicio lectores

Productividad Análisis de citas

Difusión

Procedimientos de Evaluación

Subsidiarios Convencionales Objetivos

Altmetrics


¿Otros aspectos para evaluar en una revistas?


- Aspectos formales- Normativas- Internacionalización de las revistas- Información a los autores- Cumplimiento de normativas- Formatos de Maquetación- Sistema de gestión

- Aspectos operacionales- Ejecución de procesos evaluativos- Ejecución de procesos de evaluación- Aspectos económicos

¿Qué entendemos por una revista de calidad?

Emilio Delgado López-Cózar (2012) Reunión de editores de revistas Universidad de Navarra

La que está en condiciones de asegurar a los AUTORES

que sus trabajos serán• valorados con rigor, seriedad y

honestidad• editados con pulcritud• ampliamente difundidos.

LECTORES

que la información que publica es• original• actual y novedosa• relevante, esto es útil y significativa• de calidad metodológica contrastada• bien redactada y fácil de leer


¿Qué entendemos por una revista de impacto?

Una revista científica de impacto, es aquella que se encuentra

indexada en las bases de datos Science Citation Index o Social Science

Citation Index (Thomson Reuters) y por tanto tiene calculado el

indicador Impact Factor, que mide el número de citas que recibe la

revista por sus artículos editados. Las revistas con mayor impacto son

aquellas que se sitúan en posiciones preferentes en los índices de citas

Journal Citation Reports, y por tanto son aquellas que publican los

trabajos que mayor repercusión tienen en su respectiva área.


¿Cómo se manifiesta el impacto?

Emilio Delgado López-Cózar (2012) Reunión de editores de revistas Universidad de Navarra

Cuando son muchos más los autores que quieren publicar en ella que los que pueden hacerlo

Cuando son muchos los lectores que están dispuestos a pagar de su bolsillo lo que se les pida por acceder a sus contenidos

Cuando los autores que han publicado en ella son recompensados por la comunidad.

Unos luchan por inscribir su nombre en ella y otros por poseerla


WEB OF SCIENCE

Filosofía Impacto Productos Indicadores FraudeImpactoFilosofía Impacto Productos FraudeProductos

ACCESIBLE A TRAVÉS DE LA BIBLIOTECA DE UNIR


• Science Citation Index• Social Science Citation Index• Art & Humanities Citation Index• Book Citation Index

Journal Citation Reports

Eugene Garfield


Factor de Impacto

El factor de impacto se calcula con base en un periodo de 2 años. Por ejemplo, el factor de impacto en el año 2013 para una determinada publicación puede calcularse como sigue:• A = Número de veces en que los artículos

publicados en el periodo 2011-2012 han sido citados por las publicaciones a las que se les da seguimiento a lo largo del año 2013

• B = Número de artículos publicados en el periodo 2011-2012.

Factor de impacto 2003 = A/BFilosofía Impacto Productos Indicadores FraudeImpactoFilosofía Impacto Productos FraudeProductos

Impacto

Categoría “Allergy”

► Primer cuartil

► Segundo cuartil

► Tercer cuartil

► Cuarto cuartil


Impacto

Principales Productos de Evaluación de Revistas

Subsidiarios

Convencionales

Objetivos


Indicadores de Scopus, SJR, IPP y SNIP

SNIP

SJRScimago Journal RankScimago Research Group

Source Normalized Impact per PaperCentre for Science and Technology StudiesLeiden University

IPPImpact Per Publication


El análogo de JCR en Scopus http://www.scimagojr.com/


Web of Science y ScopusDioses contra Titanes

Round 1.

Scopus (producto emergente)- Se presenta como una alternativa académica, a

WOS (WOS había sido comprada por Thomson Reuters).

- Presenta un mayor número de revistas indexadas, mayor cobertura geográfica, aunque los criterios de aceptación son turbios.

- Sus indicadores de impacto (SJR y SNIP) son teóricamente más completos y complejos que el Impact Factor.

- Se potencia la creación de aplicaciones para Scopus.


Round 2.

Web of Science (producto consolidado)- Se mantiene impasible a la embestida, aumenta

levemente su cobertura de revistas para cubrir áreas sub-representadas en Web of Science, pero insiste en el elitismo de Web of Science

- Mientras tanto, va aumentando bases de datos regionales como Chinese Citation Index y Scielo Citation Index.

- A comienzos de 2014, Web of Science tiene indexadas un mayor número de revistas que Scopus, sin necesidad de sacrificar el elitismo de base de datos de la base de datos Core.

Web of Science y ScopusDioses contra Titanes


► Es la base de datos científica más exhaustiva► Calcula el índice h de las revistas – Google Scholar Metrics

► Tiene problemas de normalización► Es factible su uso, pero los datos deben ser tratados y

procesados por profesionales.


Productos referentes según su indexaciónINTRODUCCIÓN

Élite Internacional

Web of ScienceJCR

Arts & Humanities Citation Index

Science Citation IndexSocial Science Citation Index

Revistas Internacional

Scopus

Bases de datos temáticas Medline (Medicina)RILMS (Música)Philosopher Index (Filosofía)Otras…

Revistas Regionales

LatindexSciELO (Iberoamérica)ERIH (Humanidades - Europa)Emerging Source Citation Index (Regiones mal representadas en WOS)

Élites nacionales SUDOC (Francia)Sello FECYT (España)


Críticas a las revistas Iberoamericanas- Muchas son dirigidas por personas que no realizan investigación o

investigadores mediocres, en lugar de ser dirigidas por investigadores de primer orden reconocidos internacionalmente.

- Revistas poco profesionales con procesos de edición amateur.- Revistas incapaces, por falta de medios, de evaluar grandes cantidades.- Revistas muy locales con aspiraciones internacionales basadas en la

esperanza de que les lleguen artículos externos, cuando la internacionalización es mucho más.

- Revistas sin apenas respaldo económico, institucional que garantice su futuro.

- Revistas personalistas, lo que compromete su futuro.- Reflejo de comunidades científicas con bajo impacto científico.- Su visión es más de un servicio a los profesores

que al avance científico.

Revistas

fraudulentas

Filosofía Impacto Productos Indicadores FraudeImpactoFilosofía Impacto Productos FraudeFraude

Filosofía Impacto Productos Indicadores FraudeImpactoFilosofía Impacto Productos FraudeFraude

Evaluación de revistas

Education

Transcript of Evaluación de revistas