1

Sello de calidad FECYT para las revistas científicas españolas: indicadores de evaluación

Zaragoza, 10 de Septiembre 2012

2

Índice de contenidos

Presentación de FECYT. 3

Gestión Información Científica GIC 4

Sello de calidad para las revistas científicas españolas 5

Metodología e indicadores III Evaluacion de Revistas 9

Resultados de la III Edición de Evaluación 14

Presencia en WOK y SCOPUS 19

Conclusiones 20

3

Nuestro compromiso: Misión, Visión, Vectores Estratégicos

PatronatoMISIÓNLa Fundación Española para la Ciencia y

la Tecnología, FECYT, es una fundación pública, nacida en 2001, cuya misión es impulsar la ciencia y la innovación promoviendo su acercamiento a la sociedad y dando respuestas a las necesidades del Sistema Español de Ciencia, Tecnología y Empresa (SECTE).

VISIÓNLa Fundación trabaja con el objetivo deser reconocida por el conjunto de la sociedad española como referente claveen divulgación, información y mediciónde ciencia e innovación, para contribuiral desarrollo de una economía basadaen el conocimiento y ésta es su visiónpara 2015.

VECTORESLa actividad de la fundación se articula a través de cinco vectores estratégicos:

•Divulgar: Potenciar el impacto en la sociedad de las diferentes iniciativas para desarrollar la cultura científica y de la innovación.

•Transferir: Favorecer la transferencia del conocimiento en talento innovador y emprendedor.

•Medir: Liderar el proceso de integración y racionalización de la información y métricas de la ciencia y de la innovación.

•Retornar: Promover la generación de retornos poniendo en valor las competencias.

•Modelizar: Implantar un modelo de gestión orientado al usuario y basado en la excelencia.

Nuestro compromiso: Misión, Visión, Vectores Estratégicos

4

Que hacemos en Gestión de la información Científica GIC

4 UNIDADES

� Gestión de las dos principales bases de recursos científicos electrónicos: WOK y SCOPUS

� Curriculum Vitae Normalizado CVN� Apoyo revistas científicas

españolas

� Participación en proyectos internacionales de OA y difusión

� Recolecta Ofreciendo una infraestructura robusta y una plataforma de repositorios científicos en España

� Gestores de Valorizacion, movilidad y atracción de talento

Gestión de Recursos científicos

Facilitar la gestión eficaz de los recursos científicos electrónicos

Fomento Producción científica y Acceso abierto

Favoreciendo la visibilidad y posicionamiento de la producción científica

española con alcance internacional

Repositorios

Colaborando en la construcción de un sistema robusto de Ciencia, tecnología e

innovación

Atención al investigador

5

�Profundizar en el proceso de mejora de la calidad de nuestras revistas españolas

�Ayudar a decantar a las revistas científicas españolas de calidad y aupar a un conjunto de

revistas al panorama internacional

�Cumplir unos requisitos reconocidos internacionalmente

�OBJETIVO: Excelencia y Calidad

SELLO DE CALIDAD FECYT PARA LAS REVISTAS CIENTÍFIC AS ESPAÑOLAS

6

•Difusión de estándares de calidad editorial y científica en

revistas

• Proceso de Evaluación de calidad de revistas científicas

españolas:

• FECYT concede a las revistas aprobadas un sello de

calidad, vigente durante 3 años

• FECYT recomienda el listado de revistas aprobadas a

Thomson y Elsevier para ser consideradas en sus

procesos de evaluación

• FECYT contribuye a que las Agencias de Evaluación

valoren los artículos publicados en revistas

acreditadas :�CNEAI http://www.boe.es/boe/dias/2011/11/30/pdfs/BOE-A-

2011-18796.pdf

� Agencia para la Calidad del Sistema Universitario de Cataluña

http://www.aqu.cat/doc/doc_50504346_1.pdf

�¿Qué aporta FECYT?

SELLO DE CALIDAD FECYT PARA LAS REVISTAS CIENTÍFIC AS ESPAÑOLAS

7

• Certificación ISO 9001 del proceso de evaluación

• Simplificación de la evaluación y de los procesos con dos fases (editorial + científica)

• Renovación completa de los miembros de la Comisión de Evaluación: cumplimiento de los principios de principios

de publicidad, transparencia, concurrencia, objetividad, igualdad y no discriminación.

•Eficacia en la ejecución: cumplimiento de los plazos establecidos en el calendario

• Firma electrónica de la solicitud : ha permitido una gestión documental electrónica de las solicitudes

• Tiempos de evaluación (5 meses) :

• Apertura: 3 octubre de 2011

• Cierre: 14 marzo de 2011

SELLO DE CALIDAD FECYT PARA LAS REVISTAS CIENTÍFIC AS ESPAÑOLAS: NOVEDADES DE LA TERCERA EDICION

8

SELLO FECYT

CALIDAD CIENTÍFICA Fichas de evaluación de

expertos

CALIDAD EDITORIALEvaluación de 12 indicadores con la

documentación enviada por la revista

FASE DE REGISTRO (Plataforma de participación) Cumplimentación del formularios de inscripción y envío de la documentación necesaria para analizar

los indicadores

METODOLOGIA E INDICADORES III EDICION DE LA CONVOCA TORIA

Información detallada en las bases de la convocatoria y en la guía de evaluación

COMISIÓN DE EVALUACIÓN:3 expertos evaluación

4 expertos (1 por cada

modalidad temática)

Representantes de FECYT

9

http://evaluacionarce.fecyt.es

METODOLOGIA E INDICADORES III EDICION DE LA CONVOCA TORIA

10

METODOLOGIA E INDICADORES III EDICION DE LA CONVOCA TORIA. FASE CALIDAD EDITORIAL

Documentación fase registro para analizar indicadores de la calidad editorial

� En el supuesto de revistas impresas, un ejemplar de los últimos números de la revista

� En el supuesto de revistas impresas, un justificante de la empresa que imprime los números de la revista

solicitados declarando las fechas de salida de los mismos para cada uno de los últimos números enviados

(atendiendo a la periodicidad declarada)

� Informes de los evaluadores así como, las comunicaciones entre autor/editor/revisor durante el proceso y la

definitiva decisión editorial (respuesta de los autores, comunicación a los autores sobre la decisión final de la

revista sobre la publicación o no del manuscrito, etc.) relativos a dos trabajos elegidos al azar por FECYT

publicados en la revista pertenecientes a los números que van a ser evaluados.

� Relación de revisores (indicando filiación completa) que han colaborado en la revista durante 2010. Indicar

cuáles de aquellos pertenecen al Consejo de Redacción.

� Fotocopias de los sumarios de los números que se van a evaluar indicando con:

� OR las secciones dedicadas a artículos que comunican resultados de investigación originales.

� CR los artículos firmados por al menos un miembro del Consejo de Redacción.

� ED los artículos firmados por al menos un miembro de la institución que edita o patrocina la revista (en el

caso de revistas de sociedades o asociaciones científicas, de la directiva de la sociedad/asociación).

� INT los artículos en los que colaboren al menos un autor que esté afiliado a una institución extranjera.

11

Indicadores Observaciones Documentación asociada

1. Identificación de los miembros de los consejos en la

publicaciónFiliación completa de miembros

Se comprueba en la publicación (indicando filiación de

miembros)

2. Apertura del consejo de redacciónAl menos un tercio de los miembros pertenece a

instituciones diferentes al organismo editorSe comprueba en la publicación

3. Instrucciones a autores detalladasImprescindible: Detallando metodología de

evaluación Se comprueba en la publicación

4. Existencia de resúmenes y palabras clave En todos los artículos científicos Se comprueba en la publicación

5. Traducción de los títulos de los artículos, palabras clave

y resúmenes en inglésSe comprueba en la publicación

6. Declaración y cumplimiento de la periodicidadImpresas: Certificados de imprenta. Electrónicas: número

actual online

7. Arbitraje científico externo Peer review: imprescindible

1. Informes de revisión de dos artículos seleccionados al

azar

2. Listado de evaluadores con filiación del 2010: al menos

50% externos a la entidad editora y al comité de redacción

8. Internacionalidad de la revistaMínimo 10% del Consejo asesor o 10% de los

autores afiliado a institución. extranjera

Sumarios: marcar artículos con al menos un autor afiliado

a institución extranjera

9. Porcentaje de artículos de investigaciónMás del 50% de lo publicado sean artículos de

científico originalSumarios: marcar artículos científicos originales

10. Endogamia en las autorías

Menos del 20% de los trabajos estén firmados por

miembros del Consejo de Redacción y a la entidad

editora de la revista. Solo sobre articulos de

investigación

Sumarios: marcar artículos científicos con los artículos

firmados por miembros del CR y de la institución editora

11. Bases de datos en la que están indizadas las revistasInternacionales de la especialidad y

multidisciplinares

12. Repercusión e impacto de la revistaEn términos de citas recibidas, atendiendo al área

de conocimiento al que pertenecen

METODOLOGIA III E INDICADORES EDICION DE LA CONVOCA TORIA. FASE CALIDAD EDITORIAL

12

METODOLOGIA E INDICADORESIII EDICION DE LA CONVOCAT ORIA.

FASE CALIDAD CIENTÍFICA

� Por cada una de las revistas que se evalúan en la fase de evaluación de la calidad científica la Comisión Evaluación cumplimentará una hoja de evaluación.

� La Comisión de Evaluación analizará las propuestas de cada modalidad, elaborará el listado provisional y comunicará de forma motivada la decisión la resolución provisional a cada una de las revistas.

Cada uno de estos indicadores (A y B) se valoran con una puntuación del 1 al 10. Para el cálculo de la puntuación final, la revista deberá obtener un mínimo de 5 puntos en cada uno de los indicadores, estableciéndose una nota global de corte 12 puntos.

13

12% de las revistas que han participado han superado la

evaluación31 Revistas

49 superan la fase de calidad editorial

170 revistas superan el registro

255 revistas presentadas

33%

48%

7% 12%

Nº Revistas que no superan el registro (85)

Nº Revistas que no superan la fase de evaluación de la calidad editorial(121)

Nº Revistas que no superan la fase de evaluación de la calidad científica(18)

Revistas EXCELENTES (31)

RESULTADOS III EDICION DE LA CONVOCATORIA.

14

Revistas que se

presentaron en la 1ª

edición: 16

Revistas que se

presentaron en la 2ª

edición: 57

Revistas que se

presentaron en la

1ª y en la 2ª

edición: 59

52% (132)

48% (123)

Nº Revistas que se han presentado aalguna edición anterior (132)

Nº Revistas nuevas (123)

Revistas aprobadas

que se han

presentado a

convocatorias

anteriores: 20

COINCIDENCIAS CON LA TERCERA EVALUACIÓN

RESULTADOS III EDICION DE LA CONVOCATORIA.

15

Administración Pública

Asociaciones

Centro de Estudios

Colegios Profesionales

CSIC

Editoriales

Federaciones

Fundaciones

Institutos

Otros

Sociedades

Universidades

3

20

5

6

12

37

4

6

8

12

10

132

0

3

1

2

7

2

1

0

0

1

3

11

Superan el proceso Presentadas

•El mayor % de éxito lo obtiene el CSIC con un 58% de revistas

aprobadas

•Le siguen los colegios profesionales con un 33%

•Hay que destacar la bajísima tasa de éxito de las universidades

(8.3%) y de la administración pública (0%)

RESULTADOS III EDICION DE LA CONVOCATORIA. POR TIPOLOGÍA DE INSTITUCIÓN

•11 revistas certificadas son editadas en universidades

•7 revistas certificadas proceden del CSIC•El resto proceden de asociaciones, colegiosprofesionales, federaciones….

16

Área de Cienciasde la Vida

Área de CienciasPuras

Área de CienciasSociales

Área deHumanidades

32

14

110

99

3 3

14 11

Presentadas Superan el proceso

•La tasa de éxito de las Ciencias de la Vida es del 9%

•La tasa de éxito de las Ciencias Puras es del 21%

•La tasa de éxito de las Ciencias Sociales es del 13%

•La tasa de éxito de las Humanidades es del 11%

RESULTADOS III EDICION DE LA CONVOCATORIA. TASA DE EXITO

• 14 revistas, un 45% de las revistas proceden del área de

Ciencias Sociales

• 11 revistas, el 35% de las revistas son del área de Humanidades

•10% cada una las áreas de Ciencias Puras ( 4 revistas) y Ciencias

de la vida ( 2 revistas)

17

PresentadasSuperan el

procesoPorcentaje

Primera edición 275 33 12%

Segunda edición 443 46 10%

Tercera edición 255 31 12%

TOTAL 973 110 11%

RESULTADOS AGREGADOS DE LAS TRES CONVOCATORIAS FECY T

�110 revistas es el número de

revistas que han obtenido la

certificación FECYT en alguna

de las tres convocatorias

realizadas hasta el momento.

�53 de las revistas certificadas, un 48% pertenecen al área de Ciencias Sociales y un 32% al de Humanidades

� 44 revistas con sello de calidad FECYT proceden de Universidades; 13 pertenecen al CSIC; 9 pertenecen a Sociedades y Editoriales…

18

PRESENCIA REVISTAS ESPAÑOLAS EN WOK Y SCOPUS

Convocatorias FECYT WOK SCOPUS

Primera convocatoria 16 20

Segunda convocatoria 24 34

Tercera convocatoria 9 14

TOTAL 49 68

WOK DISPONE DE 174 REVISTAS ESPAÑOLAS Y SCOPUS 318

19

COMENTARIOS FINALES

• Las revistas españolas están haciendo un esfuerzo importante por mejorar la calidad científica

• Ha habido un creciente interés en las convocatorias de evaluación que hace que ya se hayan

presentado en las tres convocatorias cerca de mil revistas

• La posición de FECYT como licenciatario nacional de las principales bases de datos cobra fuerza y poco

a poco se va reconociendo internacionalmente también el proceso de evaluación

• No solo las Universidades quieren mejorar la calidad de sus revistas, sino también otros organismos

como CSIC, Sociedades, Editoriales, Colegios Profesionales…. están presentes cada vez más en

evaluaciones de calidad

• Se han utilizado indicadores de evaluación contrastados y acordes con estándares nacionales e

internacionales, que están siendo considerados por las principales agencias de evaluación

•FECYT continuará con su labor de apoyo a la profesionalización de las revistas científicas españolas

difundiendo estándares de calidad y contribuyendo a la mejora de la Ciencia española