Criterios de calidad editorial de las publicaciones
Calidad editorial de las revistas
Otras fuentes de medición de la calidad editorial de revistas
Para las Agencias Evaluadoras (ANECA, UNIBASQ, CNEAI...) los resultados de la investigación científica que fundamentalmente meritan son trabajos de investigación publicados en revistas de la especialidad con indices de calidad relativa; en concreto revistas incluidas en Journal Citation Reports. Para el campo de las Ciencias Sociales y Jurídicas y las Humanidades pueden considerarse también artículos publicados en revistas no indexadas o sin índice de calidad relativo atendiendo al reconocimiento científico de la revista en su área, y al rigor y objetividad del proceso de selección de los artículos (como referencia, ver más abajo los "Criterios que debe reunir un medio de difusión de la investigación (revista, libro, congreso) para que lo publicado en él sea reconocido como «de impacto»" (según CNEAI).
Nota: Aunque los criterios de evaluación suelen ser muy similares de una convocatoria a otra, debemos revisar siempre las bases de las mismas para determinar exactamente qué indices podemos o no podemos usar como indicadores de calidad.
Índices de Calidad Relativa
Los Índices de Calidad Relativa (ICR) son ranking o listados de revistas ordenadas y priorizadas según un parámetro conocido, de manera que se puede definir su posición relativa en relación con el resto de las revistas analizadas pertenecientes a la misma área de especialización. El parámetro más habitual es el índice de impacto que conjuga el número de artículos publicados y las citas recibidas.
Journal Citation Reports (ISI Web of Knowledge)
Cómo se calcula el Journal Impact Factor de JCR: es el resultado de dividir el número de citas que ha recibido una revista en un año dado para los dos años anteriores por la cantidad de artículos publicados por una revista durante esos dos años citados.
- Guía: Cómo localizar el Factor de Impacto y el cuartil de una revista en JCR
- Acceso a JCR - Ediciones 1997 - actualidad
- Acceso a JCR - Ediciones 1979-1997 (Science Edition)
- Acceso a JCR - Ediciones 1990-1997 (Social Science Edition)
- Master Journal List
- Journal Citation Reports Tutorial
- Más tutoriales aquí.
- Revistas españolas JCR 2016.
La Fecyt ha desarrollado una Herramienta de Análisis del JCR que permite un uso y consulta de los datos del Journal Citation Report® de forma ágil y rápida. Esta herramienta le permitirá disponer de:
- Un entorno interactivo e integrado para conocer datos importantes del Journal Citation Report® de forma flexible y rápida.
- La posibilidad de realizar búsquedas por revista y temática de las versiones de Ciencias y Ciencias Sociales del JCR® desde el año 2002, así como los datos del factor de impacto y de las diferentes métricas.
- La exportación de los datos consultados en formato pdf.
Scimago Journal & Country Rank
El indicador expresa el número de enlaces que recibe una revista a través de la citación ponderada de sus documentos en relación con el número de documentos publicados durante el año por cada publicación. Permite hacer un ránking por países “Country indicators”. También SCImago ha desarrollado The Atlas of Science project para disponer de una representación gráfica de la investigación científica.
- Guía: Cómo localizar el Índice de Impacto SJR y el cuartil de una revista en SJR (pdf)
- Acceso a SCJ
- Revistas españolas incluidas en el SJR.
Journal Scholar Metrics
En la ficha de cada una de las revistas se nos ofrece la siguiente información:
- Los índices H5 (resultado de la relación entre el número de artículos publicados por las revistas en los últimos 5 años completos y el número de citas recibidas), Mediana H5 (número mediano de citas de los artículos que componen el índice h5) y el total de citas que contribuye al H
- El índice H5, el total de citas que contribuye al índice H sin autocitas y el porcentaje que representan las autocitas sobre el total de citas
- Cuartil y posición que ocupa la revista en cada una de las categorías en las que está indizada (Distingue entre Core Journals y el listado completo de las revistas de la categoría).
- Clicando sobre el nombre de cada una de las categorias, accedemos al listado completo de las revistas indizadas en dicha categoría.
DIALNET Métricas
Dialnet Métricas es un portal que, basándose en el análisis de las referencias bibliográficas citadas en las publicaciones existentes en Dialnet, ofrece un conjunto de indicadores para ayudar a identificar la relevancia de la producción científica.El núcleo principal es un índice bibliométrico que analiza el impacto de las revistas de las diversas disciplinas de Ciencias Sociales y Humanidades, pero se incluyen también indicadores de cada una de las publicaciones, de los investigadores y de las instituciones a las que éstos pertenecen.
IN-REC* (Obsoleto)
- Guía: Cómo localizar el Índice de Impacto y el cuartil de una revista en IN-REC*
- Acceso a IN-RECS. Índice de impacto de las revistas españolas de ciencias sociales.
- Acceso a IN-RECJ. Índice de impacto de las revistas españolas de ciencias jurídicas.
- Acceso a IN-RECH. Índice de impacto de las revistas españolas de ciencias humanas.
Otros ICR
SNIP (Source Normalized Impact per Paper)
Elsevier proporciona tres alternativas de índices de impacto, basadas en metodologías desarrolladas por bibliométricos externos: Además del ya citado SJR, tenemos el SNIP (Source Normalized Impact per Paper) y el CiteScore.
El Source Normalized Impact per Paper (SNIP) mide el impacto contextual de las citas ponderándolas según el número total de citas en una determinada área temática. Así, al impacto de una única cita se le da un valor más alto en áreas temáticas en las que las citas son menos probables, y viceversa.
Elsevier proporciona tres alternativas de índices de impacto, basadas en metodologías desarrolladas por bibliométricos externos: Además del ya citado SJR, tenemos el SNIP (Source Normalized Impact per Paper) y el CiteScore.
El Source Normalized Impact per Paper (SNIP) mide el impacto contextual de las citas ponderándolas según el número total de citas en una determinada área temática. Así, al impacto de una única cita se le da un valor más alto en áreas temáticas en las que las citas son menos probables, y viceversa.
- Mide el impacto contextual de las citas ‘normalizando’ los valores de las citas
- Tiene en cuenta la frecuencia de la cita del campo de investigación
- Considera la inmediatez - rapidez con que un documento es probable que tenga un impacto en un área determinada
- Responde a en qué medida está cubierto el campo por la base de datos subyacente
- Calcula sin utilizar la clasificación temática de una publicación para evitar la limitación
- Contrarresta cualquier potencial de manipulación editorial.
CiteScore es una métrica sencilla que calcula el número medio de citas recibidas entre todos los documentos publicados en los tres años anteriores a la métrica. Se actualiza anualmente y se presenta además del indicador se presentan los percentiles del indicador.
Por ejemplo, para calcular el valor de una publicación en 2015, CiteScore cuenta las citas recibidas en 2015 de los documentos publicados en 2012, 2013 y 2014. Este número se divide por el número de documentos indexados en Scopus publicados en esos mismos años. Si una revista tiene un percentil del 98% en este indicador significa que la revista está en el 2% de las revistas más citadas en su materia y se puede usar este dato para comparar revistas en diferentes materias.
Google Scholar Metrics
Google Scholar Metrics proporciona una manera fácil de medir el impacto y la visibilidad de las revistas. Actualmente ofrece un listado de las 100 revistas con mayor impacto agrupadas según idioma y ordenadas a su vez según su *índice-h* de los últimos 5 años.
También podemos identificar las revistas con mayor impacto por categorías temáticas, aunque esta opción sólo está, de momento, habilitada para las revistas en inglés.
RePEc
RePEc: Research Papers in Economics incluye un ranking con el factor de impacto de revistas y series de documentos de trabajo en Economía.Volver arriba
Criterios de calidad editorial
Además del índice de impacto, existen otros criterios para valorar la calidad científica de una publicación. Las diferentes agencias evaluadoras señalan, en sus respectivas convocatorias, los criterios que debe reunir un medio de difusión (revista, libro, congreso…) para que se reconozca su calidad.
Basicamente se refieren a:
- Calidad informativa: identificación de los comités editoriales y científicos, instrucciones a autores/as, información sobre el proceso de evaluación y selección de manuscritos, traducción de sumarios, títulos de los artículos, palabras claves, resúmenes en inglés y publicación de datos del proceso editorial.
- Calidad del proceso editorial: periodicidad, regularidad, arbitraje científico, revisores/as, anonimato de la revisión, instrucciones para la revisión, comunicación motivada de las decisiones, consejos de redacción y asesor.
- Calidad científica: porcentaje y tasa de aceptación de artículos de investigación
- Calidad de difusión y visibilidad: inclusión en bases de datos bibliográficas.
Agencia Nacional de Evaluación de la Calidad y Acreditación (ANECA). Programa Academia. Acceso a los Cuerpos Docentes Universitarios. Criterios de aplicación a partir del 17/11/2017: Orientaciones generales y Criterios por áreas del conocimiento.
Comisión Nacional Evaluadora de la Actividad Investigadora (CNEAI). BOE. Resolución de 23 de noviembre de 2017, de la Comisión Nacional Evaluadora de la Actividad Investigadora, por la que se publican los criterios específicos aprobados para cada uno de los campos de evaluación.
Agencia de Evaluación de la Calidad y Acreditación del Sistema Universitario Vasco (UNIBASQ). DECRETO 228/2011, de 8 de noviembre, por el que se aprueban los criterios a utilizar por Unibasq _ Euskal Unibertsitate Sistemaren Kalitatea Ebaluatu eta Egiaztatzeko Agentzia-Agencia de Evaluación de la Calidad y Acreditación del Sistema Universitario Vasco en la evaluación y acreditación del personal docente e investigador contratado de la Universidad del País Vasco/Euskal Herriko Unibertsitatea y del profesorado de las Universidades privadas de acuerdo con lo establecido en la Ley 3/2004, de 25 de febrero, del Sistema Universitario Vasco.
Estos documentos refieren un conjunto de indicadores que deben cumplir las revistas científicas. En el caso de las agencias de evaluación estos indicadores se establecen como requisitos de referencia para que una revista pueda ser considerada en los procesos de evaluación o acreditación. No obstante, esto no significa que todos los indicadores tengan el mismo peso para las agencias, por lo que pudiera darse el caso de que revistas que cumplan muchos criterios pero no estén cumpliendo alguno de los considerados fundamentales por las agencias, no resultaran bien valoradas por estas.
Ejemplo: Criterios que debe reunir un medio de difusión de la investigación (revista, libro, congreso) para que las aportaciones que en él se incluyan puedan ser consideradas «de impacto» (según CNEAI).
A) Criterios concernientes a la calidad de la revista como medio de comunicación científica:
- Calidad informativa: identificación de los comités editoriales y científicos, instrucciones a autores/as, información sobre el proceso de evaluación y selección de manuscritos, traducción de sumarios, títulos de los artículos, palabras claves, resúmenes en inglés y publicación de datos del proceso editorial.
- Calidad del proceso editorial: periodicidad, regularidad, arbitraje científico, revisores/as, anonimato de la revisión, instrucciones para la revisión, comunicación motivada de las decisiones, consejos de redacción y asesor.
- Calidad científica: porcentaje y tasa de aceptación de artículos de investigación
- Calidad de difusión y visibilidad: inclusión en bases de datos bibliográficas.
Agencia Nacional de Evaluación de la Calidad y Acreditación (ANECA). Programa Academia. Acceso a los Cuerpos Docentes Universitarios. Criterios de aplicación a partir del 17/11/2017: Orientaciones generales y Criterios por áreas del conocimiento.
Comisión Nacional Evaluadora de la Actividad Investigadora (CNEAI). BOE. Resolución de 23 de noviembre de 2017, de la Comisión Nacional Evaluadora de la Actividad Investigadora, por la que se publican los criterios específicos aprobados para cada uno de los campos de evaluación.
Agencia de Evaluación de la Calidad y Acreditación del Sistema Universitario Vasco (UNIBASQ). DECRETO 228/2011, de 8 de noviembre, por el que se aprueban los criterios a utilizar por Unibasq _ Euskal Unibertsitate Sistemaren Kalitatea Ebaluatu eta Egiaztatzeko Agentzia-Agencia de Evaluación de la Calidad y Acreditación del Sistema Universitario Vasco en la evaluación y acreditación del personal docente e investigador contratado de la Universidad del País Vasco/Euskal Herriko Unibertsitatea y del profesorado de las Universidades privadas de acuerdo con lo establecido en la Ley 3/2004, de 25 de febrero, del Sistema Universitario Vasco.
Estos documentos refieren un conjunto de indicadores que deben cumplir las revistas científicas. En el caso de las agencias de evaluación estos indicadores se establecen como requisitos de referencia para que una revista pueda ser considerada en los procesos de evaluación o acreditación. No obstante, esto no significa que todos los indicadores tengan el mismo peso para las agencias, por lo que pudiera darse el caso de que revistas que cumplan muchos criterios pero no estén cumpliendo alguno de los considerados fundamentales por las agencias, no resultaran bien valoradas por estas.
Ejemplo: Criterios que debe reunir un medio de difusión de la investigación (revista, libro, congreso) para que las aportaciones que en él se incluyan puedan ser consideradas «de impacto» (según CNEAI).
A) Criterios concernientes a la calidad de la revista como medio de comunicación científica:
- 1. Identificación de los miembros de los comités editoriales y científicos.
- 2. Instrucciones detalladas a los autores.
- 3. Información sobre el proceso de evaluación y selección de manuscritos empleados por la revista, editorial o comité de selección, incluyendo, por ejemplo, los criterios, procedimiento e informe para la aceptación de los originales a cargo de revisores o jueces preferentemente externos. Se pueden tomar como referencia los indicadores recogidos en Scholarly Publishers Indicators (SPI).
- 4. Traducción del sumario, títulos de los artículos, palabras clave y resúmenes al inglés, en caso de revistas y actas de congresos.
B) Criterios sobre la calidad del proceso editorial:
- 1. Periodicidad de las revistas y regularidad y homogeneidad de la línea editorial en caso de editoriales de libros.
- 2. Anonimato en la revisión de los manuscritos, especialmente en sistema de doble ciego.
- 3. Comunicación motivada de la decisión editorial, por ejemplo, empleo por la revista, la editorial o el comité de selección de una notificación argumentada de la decisión editorial que incluya las razones para la aceptación, revisión o rechazo del manuscrito, así como los dictámenes emitidos por los expertos externos.
- 4. Existencia de un consejo asesor, formado por profesionales e investigadores de reconocida solvencia, sin vinculación institucional con la revista o editorial, y orientado a marcar la política editorial y someterla a evaluación y auditoría, así como con suficiente representatividad académica y movilidad en su composición.
C) Criterios sobre la calidad científica de los libros y las revistas:
- 1. Porcentaje de artículos de investigación; más del 75 % de los artículos deberán ser trabajos que comuniquen resultados de investigación originales.
- 2. Autoría: grado de endogamia editorial, más del 75 % de los autores serán externos al comité editorial y virtualmente ajenos a la organización editorial de la revista.
Asimismo, se tendrá especialmente en cuenta la indexación de las revistas en las bases de datos internacionales más acreditadas que las categoricen por índice de impacto y difusión. Podrán valorarse, a juicio de la comisión, aquellas revistas que cuenten con el sello de calidad de la FECYT. Tratándose de libros y capítulos de libros se valorarán las editoriales que ocupen posiciones destacadas, en su correspondiente especialidad, en Scholarly Publishers Indicators (SPI). También podrán considerarse, a juicio de la comisión, publicaciones en colecciones de editoriales universitarias que cuenten con el sello de Calidad en Edición Académica (CEA).
Volver arriba
Calidad editorial de las revistas
ERIHPlus
European Reference Index for the Humanities and the Social Sciences (ERIH) es un índice elaborado por la European Sciende Foundation y que recoge publicaciones que cumplen ciertos criterios de calidad en el ámbito de las Humanidades y de las Ciencias Sociales. El objetivo principal de ERIH es mejorar la visibilidad global de la investigación de alta calidad en humanidades y ciencias sociales publicada en revistas académicas en las distintas lenguas europeas en toda Europa.- Guía: Cómo localizar los criterios de calidad de una revista en ERIH
- Acceso a ERIHPlus
MIAR
MIAR es un sistema para medir cuantitativamente la visibilidad de las publicaciones periódicas en Ciencias Sociales en función de su presencia en distintos tipos de bases de datos. Utiliza para ello el ICDS. El ICDS (Índice Compuesto de Difusión Secundaria) es un indicador que muestra la visibilidad de la revista en diferentes bases de datos científicas de alcance internacional, o en su defecto en repertorios de evaluación de publicaciones periódicas. Un ICDS elevado significa que la revista está presente en diferentes fuentes de información de relevancia internacional. MIAR indica en el registro de cada revista cómo se ha obtenido su ICDS y asimismo detalla en qué grupo de bases de datos, o repertorios aparece.- Guía: Cómo localizar los criterios de calidad de una revista en MIAR
- Acceso a MIAR (Matriu d'Informació per a l'Avaluació de Revistes)
CARHUS Plus+
- Acceso a CARHUS Plus+. Sistema de evaluación de revistas científicas en el ámbito de las ciencias sociales y humanidades.
Latindex
Por ello, el usuario podrá encontrar revistas incluidas en el Directorio Latindex (aquellas que cumplen menos de 25 criterios de calidad) o en el Catálogo Latindex (aquellas que cumplen 25 o más criterios de calidad).
- Guía: Cómo localizar los criterios de calidad de una revista en Latindex
- Acceso a Catálogo Latindex
Actualmente Latindex ofrece cuatro bases de datos: 1) Directorio con datos bibliográficos y de contacto de todas las revistas registradas, ya sea que se publiquen en soporte impreso o electrónico; 2) Catálogo que incluye únicamente las revistas –impresas o electrónicas- que cumplen los criterios de calidad editorial diseñados por Latindex; 3) Revistas en línea que permite el acceso a los textos completos en los sitios en que se encuentran disponibles. En la sección "Productos" se hace una mayor descripción de estos recursos y la forma de consultarlos. 4) Portal de Portales: Permite el acceso al texto completo de una selección de revistas iberoamericanas disponibles en los portales más importantes de la región.
CIRC
La Clasificación Integrada de Revistas Científicas - CIRC se propone como objetivo la construcción de una clasificación de revistas científicas de Ciencias Sociales y Humanas en función de su calidad integrando los productos de evaluación existentes considerados positivamente por las diferentes agencias de evaluación nacionales como CNEAI, ANECA).La clasificación resultante consta de cinco grupos jerárquicos (gA, gB, gC, gD) en función de la visibilidad de las revistas y un quinto grupo de excelencia (gEx).
- Guía: Cómo localizar los criterios de calidad de una revista en CIRC
- Acceso a CIRC.
La nueva versión pretende ser más operativa y que la clasificación resultante pueda ser integrada en sistemas de información científica para facilitar la construcción de indicadores bibliométricos destinados a la evaluación y descripción de los resultados de investigación de diversos agentes científicos como universidades, departamentos o investigadores. Además, incluye el listado de las revistas de la “Beall´s list of predatory Open Access Publisher”, las llamadas revistas depredadoras, es decir, revistas con mala praxis.
Volver arriba
Otras fuentes de medición de la calidad editorial en revistas
Dialnet
Dialnet (Difusión de Alertas en la Red) es uno de los mayores portales bibliográficos de acceso libre, cuyo principal cometido es dar mayor visibilidad a la literatura científica hispana. Recopila y facilita el acceso a contenidos científicos, principalmente a través de alertas documentales. Además cuenta con una base de datos exhaustiva, interdisciplinar y actualizada, que permite el depósito de contenidos a texto completo.
- Guía: Cómo localizar los criterios de calidad de una revista en Dialnet
- Acceso a Dialnet.
RESH (Obsoleto)
- Guía: Cómo localizar los criterios de calidad de una revista en RESH
- Acceso a RESH (Revistas ESpañolas de Ciencias Sociales y Humanas).
DICE (Obsoleto)
DICE (Difusión y Calidad Editorial de las Revistas Españolas de Humanidades y Ciencias Sociales y Jurídicas) tiene el objetivo de facilitar el conocimiento y la consulta de algunas de las características editoriales e indicadores indirectos de calidad de las revistas españolas de Humanidades y Ciencias Sociales.RECYT
Listado de las revistas que han obtenido el Sello de Calidad en la quinta convocatoria de Evaluación de la Calidad Editorial y Científica de las revistas científicas españolas, FECYT 2016 y Listado de todas las revistas que han obtenido el Sello de Calidad.
- Acceso a FECYT. Sistema de Evaluación de la Calidad de las Revistas Científicas.
¡ATENCIÓN! ACCESOS: Muchas de estas fuentes de información son de pago, y aunque mayoría están contratadas por las Biblioteca de las Universidades del estado; otras son de acceso libre y gratuito en internet.
Volver arriba
No hay comentarios:
Publicar un comentario