Hacia un modelo de evaluación de revistas científicas en ciencias sociales y humanidades en Argentina: diagnóstico y marcos de referencia Gustavo Liberatore Andrés Vuotto Gladys Fernández Depto. Documentación Universidad Nacional de Mar del Plata Modelos de evaluación de revistas El centro y la periferia Modelo del establishment científico: basado en unos estándares de calidad para las revistas que integran la corriente principal (mainstream) pero sesgado fuertemente a la aplicación de indicadores cuantitativos, en especial aquellos que permiten el desarrollo de rankings de visibilidad a partir del factor de impacto. Modelos nacionales/regionales: basados en la aplicación de indicadores cualitativos y cuantitativos para la evaluación de revistas de circulación local o regional con el objetivo de establecer criterios de calidad. Tienden a un abordaje holístico. Se estructuran (ponderan) sobre la base de una categorización o clasificación inspirada o basada en una síntesis de indicadores. Lejos del mainstream Nº de revistas Latindex 16.900 títulos +/- Argentina Brasil Latindex ISI México 3423 5074 2518 21 139 43 ISI 295 títulos Modelos regionales • Cinco categorías de clasificación. • Indización por convocatoria o invitación. • Solo revistas nacionales. • Criterios de evaluación: calidad científica, Calidad editorial, estabilidad y visibilidad. • Ocho categorías de clasificación. • Indización de acuerdo a la producción. • Revistas nacionales y extranjeras. • generada en los posgrados acreditados. • Criterios de evaluación: calidad científica, Calidad editorial, circulación e impacto. ¿Por qué las ciencias sociales y humanidades? 8000 59545 art. 7000 6000 5000 4000 3000 3800 art. 2000 1000 0 2003 2004 2005 2006 2007 2008 2009 2010 2011 2012 SCCI SCI Total de investigadores Masa crítica Total de investigadores: 80.000 aprox. CSyH: 24.000 aprox. Fuente: MINCyT. 2011 30,5 % Investigadores CS yH Una posible comparación Características Origen Institución madre Año de inicio Cobertura Indización Argentina Colombia Brasil CAICyT 2005 Colciencias CAPES Títulos nacionales Por solicitud de la revista Evaluadores Comité asesor Categorización Período de evaluación Sin categorías 3 años 1998 1996 Títulos nacionales y Títulos nacionales extranjeros Por convocatoria o Por selección y invitación colecta de CAPES Comité de Comisiones por selección y disciplina permanencia 4 categorías 8 categorías 2 años 2 años ¿Es posible saber cuántas revistas de CSyH existen en Argentina? 4 ISI 10 SCOPUS 57 SCIELO (Arg.) 104 Núcleo Básico 1793? Latindex Reduciendo la incertidumbre Revistas en línea editadas por universidades públicas en Argentina en CSyH N=365 ¿Qué evaluar? Aspectos cualitativos Aspectos cuantitativos Evaluación social? indicadores sintéticos indicadores de impacto Comunidad científica Algunos problemas (cuantitativos) La Fuente de datos Tendencias ¿Es Google Scholar una alternativa? GSM Nº de revistas Nº de países Fuente de las citas Control de autoridad Áreas temáticas Indicador principal Ventana de citación Inclusión de autocita Análisis de resultados JCR SJR 40.000 (estimado) Desconocido (técnicamente todos) 10.700 19.800 82 98 Multiplicidad de fuentes Fuentes cubiertas por el Web of Science Fuentes cubiertas por Scopus No 313 disciplinas H-index 5 años Si No Si Si 232 disciplinas 313 disciplinas Impact Factor SJR 2 años 3 años Si (puede Si (hasta el umbral discriminarse) del 33%) Si Si López-Cozar & Cabezas-Clavijo, 2013 Algunas reflexiones Con respecto a la producción de nuevos indicadores, más precisamente a la fuente de datos necesaria para poder obtener los datos, es interesante apostar a la posibilidad de contar con sistemas confiables desde donde tomar la información necesaria. La implementación a nivel nacional del sistema SIGEVA basada en la carga de los CV digitales por parte de los investigadores es una buena señal de cara a desarrollos futuros. Algunas reflexiones Con respecto a Google Scholar… Las posibilidades que brinda la herramienta Google Scholar que, si bien presenta todavía algunas lagunas, puede constituirse en una fuente de datos valiosa para países como el nuestro.