X FORO DE ALMAGRO De la verificación a la acreditación en los nuevos planes de estudios Almagro, 10 de octubre de 2008 Eduardo García Coordinador de Innovación Índice De la verificación a la acreditación. La implantación de las enseñanzas. Renovación de la acreditación Asegurar el rendimiento. Garantizar la continuidad entre ciclos. No poner barreras a la diversidad y a la innovación. Proporcionar información útil a la sociedad. Seguimiento: rendición de cuentas. De la verificación a la acreditación Ciclo de vida de la enseñanza Sistema de evaluación y acreditación ANECA u Organismos de evaluación CCAA U N I V E R S I D D A D E S Consejo de Universidades • Diseño Autorización MICINN/CCAA 9VERIFICACIÓN RUCT Título acreditado • Implantación • Revisión y mejora 9SEGUIMIENTO 9ACREDITACIÓN RENOVACIÓN de la ACREDITACIÓN cada 6 años • Extinción De la verificación a la acreditación Acreditación en la normativa española Renovación de la acreditación 9R.D. 1393/2007. “Preámbulo”: 9Supervisar la ejecución efectiva de las enseñanzas. 9Rendición de cuentas. 9Acreditación supone la verificación del cumplimiento del proyecto presentado por la Universidad y facilitará la participación en programas de financiación específicos como, por ejemplo, de movilidad de profesores o estudiantes. De la verificación a la acreditación Acreditación en la normativa española Renovación de la acreditación 9 R.D. 1393/2007 art. 26: 1.Tras la verificación por el CU y la autorización de la Comunidad Autónoma, el Gobierno establece su carácter oficial e inscripción en el RUCT. 2.Tras su registro en el RUCT el título está acreditado. 9 art. 27: 1.La acreditación se mantendrá cuando obtenga un informe de acreditación positivo, tras 6 años desde su registro en el RUCT. 2.Comprobar que el plan de estudios correspondiente se está llevando a cabo de acuerdo con su proyecto inicial, mediante una evaluación que incluirá, en todo caso, una visita externa a la institución. De la verificación a la acreditación Acreditación en la normativa española Renovación de la acreditación 9R.D. 1393/2007 Anexo I : La Universidad deberá justificar el ajuste de la situación de lo realizado con lo propuesto en el proyecto presentado, o justificar las causas del desajuste y las acciones realizadas en cada uno de los ámbitos. De la verificación a la acreditación Acreditación en la normativa española Seguimiento de los títulos RUCT 9R.D. 1393/2007. art. 27.4: 9Modificaciones en el diseño del plan de estudios, notificadas a ANECA y CU: 9Comisiones de evaluación examinan las modificaciones. 9 Sin cambios en los objetivos y naturaleza del título: Propuesta aceptada. 9 Cambios en los objetivos y naturaleza del título: nueva verificación. De la verificación a la acreditación RENDICION DE CUENTAS (b) IMPLANTACIÓN RENOVACIÓN DE LA ACREDITACIÓN SEGUIMIENTO Garantiza aprendizaje de calidad (competencia y cualificación profesional) Garantiza que no se está poniendo en cuestión (b) teniendo en cuenta cómo se está aplicando (a) M E C E S (EFQ) PROYECTO (a) ACREDITACIÓN Garantiza la calidad de la propuesta de formación: objetivos, plan de estudios, recursos, SGC M Resultados de aprendizaje Progreso en el aprendizaje Resultados de aprendizaje previstos E C E S (EFQ) La implantación de las enseñanzas Plan de estudios es un proyecto que debe llevarse a cabo. Desarrollo de las enseñanzas a partir de ese proyecto implica al menos: Oportunidades suficientes para que los estudiantes aprendan solos/en grupo en ambientes físicos o virtuales. Gestión del personal académico y de los recursos materiales y servicios necesarios para poder ofrecer dichas oportunidades. Participación efectiva de todos los agentes implicados en el desarrollo de la enseñanza. Aplicación del sistema de garantía de calidad que mida el progreso de los estudiantes, analice los resultados obtenidos e introduzca las mejoras necesarias, etc. Renovación de la acreditación Rendición de cuentas Asegurar el rendimiento 9 ¿Cómo podemos acreditar el rendimiento? 9 El rendimiento del estudiante, especialmente sus resultados de aprendizaje, como evidencia de la calidad de una enseñanza universitaria: 9Indicadores y evaluaciones del rendimiento: 9Tasas de matrícula, abandono, graduación y eficiencia, retorno de la inversión económica en máster y doctorado, etc. 9 Resultados de la evaluación del progreso y el aprendizaje de los estudiantes. Renovación de la acreditación Enfoque 9 Experiencias de acreditación de otros sistemas universitarios: 9 USA. 9 Europa. 9 Consideración de sus lecciones aprendidas. Renovación de la acreditación Rendición de cuentas Asegurar el rendimiento 9 La verificación debería asegurar que los planes de estudio cuentan con resultados de aprendizaje claramente definidos. 9 La verificación debería asegurar que las universidades cuentan con procedimientos para valorar el progreso y los resultados del aprendizaje de los estudiantes. 9 El seguimiento debería asegurar que las universidades aplican procedimientos válidos y fiables para recoger evidencia sobre el aprendizaje de los estudiantes. 9 La acreditación debería poder contrastar el logro de los objetivos y resultados de aprendizaje previstos. Renovación de la acreditación Asegurar la continuidad entre ciclos Acreditar los resultados de aprendizaje 9 Acceso y admisión a la Universidad. 9 Enseñanzas de Grado – Enseñanzas de Máster. 9 Enseñanzas de Máster o Grado – Enseñanzas de Doctorado. (Descriptores de Dublín) Anexo I, RD 1393/2007. 3. Objetivos M.E.C.E.S. Renovación de la acreditación No poner barreras a la diversidad y la innovación Diversidad e innovación 9 Enseñanzas con un número significativo de estudiantes a tiempo parcial. 9 Enseñanzas con un número significativo de estudiantes de grado/máster con créditos reconocidos de otras enseñanzas. 9 Títulos conjuntos, internacionales, etc. 9 Enseñanzas de máster con diferentes orientaciones (profesional, investigadora) 9 Educación a distancia. 9 Instituciones con ánimo de lucro. Renovación de la acreditación Proporcionar información útil a la sociedad Enfoque hacia el beneficiario/cliente 9 Acreditación tiene como propósito general proteger: 9Al ciudadano proporcionándole a través de la acreditación información sobre la validez de las prácticas educativas. 9Las inversiones en enseñanza universitaria. 9Acreditaciones suelen proporcionar información sobre los inputs (calidad del profesorado, instalaciones, etc.) y en los procesos (gestión académica, enseñanza, etc.). 9 Enfoque hacia el beneficiario (requisitos de admisión, orientación profesional, competencias previstas, resultados de aprendizaje logrados, etc.). Renovación de la acreditación Proporcionar información útil a la sociedad Enfoque hacia el beneficiario/cliente 9Evidencia comparativa entre planes de estudios: 9 ¿Rankings? 9 Información a las Administraciones públicas: financiación. 9 Información a las Universidades: mejora, financiación externa. 9 Información a la sociedad y a los estudiantes: diferenciación de la oferta. Renovación de la acreditación Proporcionar información útil a la sociedad Enfoque hacia el beneficiario/cliente 9 Rol de las agencias: 9 Orientación de los procesos de acreditación: 9 Evidencias que se solicitan a las universidades. 9 Metodología empleada. 9 Rol de las universidades: 9 Enfoque de la implantación del plan de estudios. 9 Orientación de la recogida de información. Seguimiento “Quality not a unitary concept: it’s a stakeholder-relative” (Newton,2007) Llevar a cabo el seguimiento del desarrollo de las enseñanzas y de la renovación de la acreditación plantean cuestiones que requieren: Alcanzar un acuerdo entre los agentes implicados (Administraciones públicas, Consejo de Universidades, ANECA y organismos de evaluación de las Comunidades Autónomas) sobre dichos procesos: Determine el rol y los hitos fundamentales de actuación de los agentes. Bases de la coordinación entre dichos agentes. Establecer referentes para ambos procesos, con la participación de los principales agentes implicados. Seguimiento Convendría elaborar un Código de buenas prácticas para asegurar la calidad de las enseñanzas: Seguimiento. Renovación de la acreditación. Código de buenas prácticas recoge los acuerdos, alcanzados en el ámbito del sistema universitario español, sobre la garantía de la calidad de la enseñanza universitaria. Estaría elaborado por ANECA y los organismos de evaluación de las comunidades autónomas a partir de los acuerdos sobre garantía de la calidad de la enseñanza universitaria. Un ejemplo: QAA (2006). Code of practice for the assurance of academic quality and standards in higher education. Section 7. Programme design, approval, monitoring and review. Seguimiento Código de buenas prácticas estaría formado por un conjunto de principios y referentes que cubrirían los diferentes aspectos contemplados en el R.D. 1393/2007. Código de buenas prácticas representaría un punto de referencia para las universidades: Al asegurar de una forma consciente, activa y sistemática la calidad académica de sus enseñanzas; conexión con la investigación y su transferencia. Al asegurar el cumplimiento de los referentes de seguimiento de las enseñanzas y de renovación de la acreditación. Cada universidad, teniendo en cuenta los principios y prácticas acordados, aplicaría su propio sistema de garantía de la calidad para: Revisar la calidad de sus enseñanzas y el cumplimiento de referentes. Contrastar la eficacia del sistema de garantía de la calidad. Seguimiento ¿Sobré qué modelo de seguimiento deberían llegar a un acuerdo los agentes implicados en la educación superior en España?. En muchos países que integran el EEES falta de claridad sobre los fundamentos: Retórica asociada a la mejora, pero que pone el énfasis en la rendición de cuentas, la conformidad a unos estándares y el control por parte de los gobiernos y otros grupos de presión. Mejora no siempre significa una mejora de la enseñanza y el aprendizaje del estudiante, mas bien es una mejora en la documentación que se aporta sobre un programa o en la información sobre sus resultados. Seguimiento El modelo de seguimiento de las enseñanzas que se adopte, estará en buena medida condicionado por el enfoque garantía de calidad y de “evaluación externa” elegidos. Modelos basados en la rendición de cuentas. Incorporan: un control por parte de los gobiernos sobre la educación superior; la conformidad con estándares fijados a nivel gubernamental; y mejora en la transparencia sobre actuaciones y resultados. Modelos basados en la investigación sobre la enseñanza y sus resultados. Incorporan un análisis de los procesos y motivaciones internas sobre la calidad que tienen las instituciones. Se centran en el estudiante y los resultados de aprendizaje; incorporan resultados de investigación. Seguimiento Administraciones públicas Universidades Objetivos, referentes, regulaciones de la educación superior Diseñan, implantan y revisan sus planes de estudios en conformidad con. Mecanismos de control externos Rinden cuentas e informan Universidades Mecanismos de mejora de la enseñanza y el aprendizaje. Identificación y diseminación de buenas prácticas. Mecanismos de autoregulación e investigación. Revisiones internas-externas Universidades – AA.PP y organismos investigación Diálogo entre institución y equipo de evaluación externa (p.e. negociación FINHEEC y HEI, Re-audit agreement). Seguimiento La elección de un determinado modelo, los presentados u otros alternativos debería considerar: Los antecedentes e historia del sistema universitario español. El marco normativo existente. La realidad de las universidades y del contexto social y económico. En cualquier caso, el seguimiento debería tener en cuenta: Su fundamento es la mejora relacionada con aprendizaje (experiencia, ambiente y resultados). Los procesos organizacionales que tienen lugar en las universidades para desarrollar los planes de estudios. El papel que juega el personal académico y los estudiantes. La posibilidad de incorporar una perspectiva de investigación que informe el seguimiento, considerando la perspectiva de los agentes de interés y de los factores externos que influyen en el aprendizaje. Seguimiento El seguimiento es parte del aseguramiento de calidad de las enseñanzas, pero es efectivo en las universidades en la medida en que: Existe el suficiente grado de autonomía institucional. La universidad se responsabiliza del seguimiento (o de aportar la información que se le requiere por un sistema externo de información), identificando las dificultades y los cambios que debe introducir en el plan de estudios o en su desarrollo. La universidad apoya el cambio que se deriva del seguimiento e incentiva las iniciativas asociadas al mismo. Se integra en la cultura de calidad de la universidad implicando a todos los agentes de interés. Seguimiento El seguimiento se transforma en persecución Elevada frecuencia de revisiones externas. Revisiones externas exhaustivas y centradas en los detalles. Revisiones que son un ejercicio muy formalista y contraproducente (Informe externo de NOKUT). Utilidad es exclusivamente lograr acreditaciones o reconocimientos. No introduce mejoras o innovaciones en las enseñanzas. Está desconecta de la investigación y su transferencia. No genera sinergias con otras actuaciones que se realizan dentro de las universidades. Cuando el seguimiento implica aportar informaciones, cambios de formato en las ya existentes u obtención de indicadores al margen de los que requiere el sistema de garantía interna de la universidad. Seguimiento Dinamismo de los procesos de enseñanza y aprendizaje. Organización de las modalidades de enseñanza Gestión del personal académico y de los recursos materiales y servicios. Desarrollo de la enseñanza (conexión con la investigación), sistemas de apoyo al estudiante, evaluación de los aprendizajes, etc. El plan de estudios que conduce a un título acreditado se ve afectado por ese mismo dinamismo. El seguimiento debe ser capaz de recoger es dinamismo. Seguimiento ¿Qué término de comparación debe considerarse en el seguimiento de un plan de estudios? Comparación entre el Plan de estudios que se está llevando a cabo y el proyecto inicial. inicial Antifraude, de conformidad Control Comparación entre los resultados de aprendizaje esperados y los obtenidos. Cumplimiento de objetivos Dinámico Los cambios e innovaciones introducidos en el plan de estudios, que mejora los resultados estimados el proyecto inicial. Estático Innovación y mejora ¿Es posible adoptar más de un enfoque? A modo de conclusión Los procedimientos de evaluación externa y los SGIC son el medio no el fin. La renovación de la acreditación debería tener como leit motiv los resultados del aprendizaje. Seguimiento debería considerar el progreso en el aprendizaje como su principal foco de análisis. Los procedimientos de evaluación externa no deberían limitar sino favorecer los procesos de innovación en las enseñanzas. Es fácil y resulta cómodo desviarse del foco de atención principal: el aprendizaje de los estudiantes, asociado al desarrollo de la investigación y la transferencia de conocimiento. Muchas gracias por su atención