Agencia Nacional de Evaluación y Prospectiva (ANEP) Memoria e Informe Anual 2013 [Escriba texto] Página 0 Agencia Nacional de Evaluación y Prospectiva (ANEP) Albacete, 5 – 28027 Madrid http://www.idi.mineco.gob.es/portal/site/MICINN/menuitem.26172fcf4eb029fa6ec7da6901432ea0/?vgne xtoid=3d5167b99490f310VgnVCM1000001d04140aRCRD INDICE Presentación …………………………………………………………………………………………………………………….. 2 I Estructura y organización ……………………………………………………………………………………………… 2 Estructura interna Estructura externa Comisión Asesora II Actividades realizadas en 2013 ……………………..…………………………………………………………….… 4 IIA Convocatorias del Ministerio de Economía y Competitividad y otros ministerios. IIB Convocatorias de otras instituciones y organismos. III Gestion Económica 2013 ……………………………………..…………………………………………………..… 8 IV Información adicional …………………………………..……………………………………........…………..…. 10 Memoria Anual 2013 Página 1 PRESENTACIÓN La Agencia Nacional de Evaluación y Prospectiva (ANEP) fue creada en 1986 y actualmente es una unidad con rango de Subdirección General, adscrita a la Dirección General de Investigación Científica y Técnica de la Secretaría General de Ciencia, Tecnología e Innovación, dependiente de la Secretaría de Estado de Investigación, Desarrollo e Innovación que forma parte a su vez del Ministerio de Economía y Competitividad desde Diciembre de 2011 (Real Decreto 1823/2011). Corresponde a la ANEP realizar la evaluación científico-­‐técnica anterior y posterior de las Acciones del Plan Nacional de I+D+i y del Plan Estatal de Investigación Científica y Técnica, y de otras actuaciones de política científica y tecnológica (proyectos, institutos, infraestructura, personal) con objetividad e independencia. Así mismo, la ANEP participa en la evaluación de convocatorias de otros organismos públicos e instituciones privadas que forman parte de la red española de I+D+i, y colabora con otras agencias internacionales en la evaluación de proyectos pertenecientes a programas de cooperación internacional. Además, la ANEP realiza estudios de prospectiva como fuente de información de interés estratégico para el conocimiento de la calidad científica, la optimización de los recursos y la visualización de las tendencias futuras de investigación e innovación. Por otra parte, como representante de España en la Red Europea de Agencias de Evaluación (European RTD Evaluation Network), participa también en la discusión y análisis de la metodología de evaluación, en la revisión del uso de indicadores y la medición del impacto de los resultados de la investigación. I ESTRUCTURA Y ORGANIZACIÓN La estructura de la ANEP consta de dos partes bien diferenciadas: una interna, con personal propio adscrito a la Subdirección General que da soporte organizativo para garantizar la transparencia, eficacia e igualdad de tratamiento en el proceso de evaluación; y otra externa formada por expertos de diferentes áreas temáticas que participan como colaboradores temporales en las tareas de evaluación científico-­‐ técnica basada en la evaluación por pares. • Estructura Interna Actualmente se compone de 19 personas que forman parte de la dirección y de dos departamentos: uno encargado de la gestión de evaluación y otro de la gestión económica y administrativa (Anexo I). El departamento de gestión de evaluación está compuesto por personal administrativo que da soporte a las diferentes áreas científicas realizando las tareas de gestión y control de solicitudes, procesado de Memoria Anual 2013 Página 2 informes de evaluación, organización y seguimiento de comisiones de evaluación. El departamento de gestión económica y administrativa es responsable de la gestión de los convenios establecidos con las organismos solicitantes y de los pagos a los colaboradores que forman parte de la estructura externa, a los expertos remotos o presenciales que realizan las evaluaciones y todos los pagos correspondientes a asistencia a comisiones, desplazamientos, dietas y gastos de viaje. • Estructura externa La ANEP se estructura en 26 áreas científicas y al frente de cada área hay un equipo de 4 a 8 colaboradores (coordinador y adjuntos) que son científicos, investigadores y expertos de reconocido prestigio dentro de cada área. Estos expertos desempeñan su actividad en organismos públicos y privados de investigación o desarrollo tecnológico generalmente dentro del ámbito estatal. Además, se dispone de una base de datos con más de 33.000 expertos, de los cuales un 11% son extranjeros, que actúan como evaluadores remotos (Anexo II). Cada equipo identifica evaluadores (pares) especializados nacionales o internacionales de acuerdo con el tema del proyecto y el objetivo de la convocatoria. A partir de los informes individuales realizados por los evaluadores (a través de la aplicación telemática de ANEP), los equipos de coordinación elaboran un informe final para cada solicitud. Los informes finales se envían a la institución responsable de la convocatoria. La duración de la colaboración de los equipos de coordinación es de aproximadamente tres años. El nombramiento de los colaboradores es competencia de la Dirección General de Investigación Científica y Técnica, y sus nombres aparecen publicados en la sección de la ANEP (http://www.idi.mineco.gob.es/portal/site/MICINN/menuitem.8ce192e94ba842bea3bc811001432ea0/?vg nextoid=d2bbe7c85ab4d210VgnVCM1000001d04140aRCRD). Durante el periodo de colaboración con la ANEP reciben un pago mensual de acuerdo con la orden del 5-­‐dic.-­‐2013 del Secretario de Estado de Hacienda y Presupuestos. • Comisión Asesora de Política Científica Desde 2005, la ANEP ha contado con una Comisión Asesora de Evaluación y Prospectiva cuya función es dar soporte en la toma de decisiones y procedimientos y participar en la resolución de los conflictos de intereses. Esta comisión ha pasado a denominarse Comisión Asesora de Política Científica con la asignación de nuevas funciones además de las tareas antes mencionadas y actualmente depende de la Dirección General de Investigación Científica y Técnica. Memoria Anual 2013 Página 3 II ACTIVIDADES REALIZADAS EN 2013 Las actividades desarrolladas por la ANEP se centran en tareas de evaluación, a requerimiento de diferentes organismos que convocan y gestionan programas de I+D y que se pueden desglosar en dos grandes grupos: IIA Convocatorias del Ministerio de Economía y Competitividad y otros ministerios. IIB Convocatorias de otras instituciones y organismos. Durante el año 2013 se ha llevado a cabo la evaluación de un total de 13.454 solicitudes procedentes de 100 convocatorias diferentes y con la participación de 4.040 evaluadores, sin contabilizar los coordinadores y adjuntos (Anexo III). La mayoría de los expertos remotos proceden del ámbito nacional pero en algunos casos por exigencias de la convocatoria o por el área de especialización a evaluar tambien se recurre a expertos internacionales que engloba tanto a expertos extranjeros como nacionales con residencia en el extranjero. Además, siguiendo las recomendaciones ERA (European Research Area) de la Unión Europea para cumplir con los estándares internacionales de evaluación, en 2013 el 28,9% de los expertos han sido mujeres. Las solicitudes se agrupan en 7 categorías, siendo las más importantes: proyectos de investigación, cooperación internacional, becas y contratos, infraestructuras y equipamiento, movilidad de investigadores e institutos universitarios. Además, existe la categoria denominada Otros que incluye la evaluación de una miscelánea de temas como premios, investigadores “ad honorem”, etc. Las categorias incluyen las convocatorias nuevas del año correspondiente y el seguimiento de convocatorias previas para evaluar periodicamente el cumplimiento de los objetivos. El mayor número de solicitudes evaluadas en 2013 caen dentro de la categoria de becas y contratos donde se han evaluado hasta 8.008 solicitudes; seguida de proyectos de investigación (3.826), movilidad Memoria Anual 2013 Página 4 del personal investigador (1.274) y Cooperación internacional (44). No obstante, otras convocatorias con un menor número de solicitudes como Infraestructura (138) o Institutos universitarios (26) implican un grado de complejidad mayor durante el proceso de la evaluación debido a la cantidad de documentación y los diversos aspectos evaluables (económicos, curriculares, etc). Atendiendo a la distribución de solicitudes por áreas las de Biomedicina (BMED), Medicina Clínica (MCLI) e Industria (IND) han evaluado aproximadamente el 45% de las solicitudes totales; en BMED y MCLI la mayoria pertenecen a la categoría de proyectos y en el caso de IND se encuadran en becas y contratos (Anexo IV). IIA Convocatorias del Ministerio de Economía y Competitividad y otros. En este apartado se incluyen las convocatorias financiadas por diferentes ministerios, la mayoría a través de la Secretaría de Estado de Investigación, Desarrollo e Innovación dentro del Plan Estatal de Investigación Científica y Técnica y de Innovación 2013-­‐2016 y ejecutadas por los Organismos Públicos de Investigación de la Administración General del Estado (OPIs). Durante el año 2013 se han evaluado las siguientes convocatorias: Memoria Anual 2013 Página 5 Las solicitudes evaluadas han sido 11.158 (incluyendo evaluaciones de seguimiento y alegaciones) y se distribuyen en las siguientes categorías: • • • • Proyectos Cooperación internacional Infraestructuras Becas y Contratos 2.426 44 48 7.520 IIB Convocatorias de otras instituciones y organismos Dado que la ANEP ha alcanzado un indudable prestigio, otros organismos e instituciones como las Comunidades Autónomas, Universidades (públicas y privadas), y fundaciones (públicas y privadas) solicitan la evaluación de sus respectivas convocatorias para financiar diferentes aspectos relacionados con actividades de investigación científica y técnica. Las solicitudes evaluadas en 2013 han sido 2.296 y se han agrupado por organismos como se indica a continuación: Universidades Fundaciones C. Autónomas Otros • Proyectos 441 554 285 130 • Centros/Grupos 26 -­‐ -­‐ -­‐ • Infraestructuras 74 -­‐ 16 -­‐ • Becas/Contratos 480 106 -­‐ -­‐ • Premios; etc -­‐ -­‐ -­‐ 138 • Las entidades y organismos solicitantes con las que hemos colaborado y las convocatorias evaluadas se muestran en las siguientes tablas agrupadas por categorías. Convocatorias 2013 Universidades Memoria Anual 2013 Página 6 Convocatorias 2013 de Fundaciones Convocatorias 2013 de Comunidades Autónomas y otros organismos Memoria Anual 2013 Página 7 III GESTION ECONÓMICA 2013 El proceso de evaluación conlleva unos gastos debido al abono de una compensación económica en concepto de asistencias a los colaboradores que componen la estructura externa de la ANEP y a los expertos científicos y tecnológicos que participan en la evaluación. La cuantia abonada se divide en distintos módulos de acuerdo con el tipo de solicitud a evaluar (artículo 19 de la ley 14/2011 de 1 junio; revisada el 5-­‐dic-­‐2013). Siguiendo el protocolo establecido, cada una de las solicitudes (excepto las alegaciones) debe ser evaluada al menos por dos expertos y en caso de puntuaciones discrepantes se solicita una tercera evaluación, por lo que el número total de evaluaciones en 2013 ha sido de 25.568. En la mayoría de los casos, los expertos actúan como evaluadores remotos; sin embargo, en aquellos casos en que las diferentes convocatorias lo requiere se crean comités de evaluadores presenciales. Los gastos totales ejecutados en 2013 son los siguientes: A excepción de las convocatorias dependientes de la Secretaría de Estado de Investigación, Desarrollo e Innovación, el proceso de evaluación externa de las convocatorias correspondientes a otros organismos que desean contar con la colaboración de la ANEP requiere la firma de un convenio aprobado previamente por la Abogacía General del Estado para financiar los gastos correspondientes al pago de los evaluadores y de colaboradores temporales, así como los gastos de locomoción, alojamiento y dietas de los mismos. Por tanto, los costes derivados de estas evaluaciones son reintegrados a la ANEP. En el gráfico se muestra la distribución de las solicitudes según los diferentes organismos solicitantes. Memoria Anual 2013 Página 8 Por último, el coste de evaluación varia dependiendo de dos factores: el volumen y complejidad de la documentación a evaluar (centros, contratos, proyectos) y del tipo de evaluación ya sea con expertos remotos o mediante la creación de comités de evaluación con expertos presenciales. De acuerdo con estos criterios, hemos hecho una estimación de los costes reales para cada una de las categorías utilizando para su cálculo la media aritmética de los gastos generados en cada una de las convocatorias con requisitos de evaluación similares. En la siguiente tabla se muestra el coste medio para diferentes tipos de solicitudes: Memoria Anual 2013 Página 9 ANEXO I PERSONAL ADSCRITO A LA ANEP (datos Noviembre 2013) Memoria Anual 2013 Página 10 ANEXO II EVALUADORES NACIONALES Y EXTRANJEROS ACTIVOS EN LA BASE DE DATOS ANEP EN 2013 Memoria Anual 2013 Página 11 ANEXO III NÚMERO DE CONVOCATORIAS POR CATEGORIAS Y NÚMERO DE EXPERTOS QUE HAN EVALUADO EN 2013 Memoria Anual 2013 Página 12 ANEXO IV SOLICITUDES EVALUADAS EN 2013 Y DISTRIBUIDAS POR CATEGORIAS Y ÁREAS Memoria Anual 2013 Página 13