EVALUACIÓN DEL ALUMNO MEDIANTE NUEVAS TÉCNICAS EN PRUEBAS OBJETIVAS (TIPO TEST) Ramón Rubio García, Ramón Gallego Santos, Javier Suárez Quirós, Jose Eugenio Cueto González Escuela Universitaria de Ingenieros Técnicos Industriales de Gijón rrubio@correo.uniovi.es 1 RESUMEN La evaluación de los alumnos es el tema que más preocupa a los alumnos a lo largo de sus estudios universitarios: cómo se realiza, si se hace con justicia, si hay que memorizar, si hay que razonar...en resumen, cómo quiere el profesor que se le demuestre que el alumno ha aprendido. Esta preocupación nos lleva a investigar nuevos métodos de evaluación que alcancen cotas más altas en los aspectos antes mencionados y creemos que este foro es el más indicado para fomentar esa investigación. El paradigma de la evaluación es la evaluación contínua instantánea, es decir, que en cada momento sepamos qué es lo que sabe un alumno. Este objetivo inabordable se puede acercar a la realidad mediante evaluación-portfolio, una recopilación de todo el trabajo que realiza el alumno y sus evaluaciones en distintas pruebas (entre ellas la evaluación objetiva o test). En esta ponencia presentamos las nuevas técnicas que se pueden utilizar en las pruebas objetivas: 2 • Técnicas multimedia: Utilización de tests animados desarrollados con Macromedia Flash. • Web: Herramienta para profesores con el fin de crear webs dinámicas que permitan crear y corregir tests. • Evaluación contínua: Metodología de evaluación diaria en el aula mediante tests de comprensión. INTRODUCCIÓN A LA SITUACIÓN ACTUAL DE LA EVALUACIÓN Está claro que algo está pasando en los últimos años en la educación: los profesores se desesperan con la llegada de alumnos que tienen una base de conocimientos deficiente para cursar las asignaturas, los alumnos apenas tienen tiempo para estudiar debido a las distribuciones horarias originadas por los nuevos planes de estudios y la consecuencia es terrible: absentismo en los examenes, miedo al fracaso, pasotismo, exagerada prolongación de los estudios... Ni alumnos ni profesores son los causantes de esta situación; pero sí está es sus manos intentar solucionarlo. Los alumnos, aceptando los cambios que se han producido en la Universidad e involucrándose en la formación académica que están recibiendo y por otro lado los profesores deben comprender al alumnado y poner medios que facilite el aprendizaje directo del alumno. En los últimos años se habla de la revolución de la calidad de la enseñanza y se nos llena la boca de nuevos proyectos y reestructuraciones, de nuevas titulaciones y enseñanzas virtuales....y tememos que se esté olvidando al alumno en todo este proceso. Una de las posibles soluciones por cuenta de los profesores es la cambiar la estructura de la evaluación. Hoy día hablar de evaluación no es sinónimo de examen. Son muchos los docentes que se revelan ante el hecho de que evaluación signifique examen final y buscan nuevas formas de revisar los conocimientos de sus alumnos. Sabemos que un elemento clave en el diseño de la evaluación es la selección y elaboración de los procedimientos e instrumentos de recogida de la información que permitan porteriormente, tomar las mejores decisiones sobre el plan curricular, la interacción didáctica y los propios alumnos. Las diferentes evaluaciones se pueden catalogar en dos clasificaciones: • Clasificación Temporal: En función del momento en que se toma. • Clasificación Metodológica: En función del método empleado. Escudero (2001) describe los procedimientos de evaluación más habituales según la clasificación metodológica: La observación directa del profesor es un procedimiento fundamental para la evaluación en todos los dominios educativos. Es probablemente el elemento de modulación más importante a la hora de valorar la información recogida por otros procedimientos. La observación es útil, sobre todo, para la evaluación tipo criterio, calificaciones, etc. No tiene aplicabilidad para sondeos iniciales rápidos. Respecto a la medida, tiene problemas de fiabilidad, aunque ésta pierde relevancia si se utiliza desde un punto de vista general. Si se administra bien, su eficacia es muy alta. Los procedimientos orales, exámenes, entrevistas, interrogatorios, defensa, presentación de temas son en conjunto muy poderosos para valorar todo tipo de destrezas. Ahora bien, su utilidad real queda disminuida porque su nivel de eficiencia potencial no es alto y aunque nos valgan para ciertas situaciones, generalizar este tipo de evaluación puede ser problemático. Los ejercicios escritos tipo tema tienen una potencialidad evaluadora muy escasa, puesto que son costosos de aplicación, de escasa validez de contenido, de fiabilidad no muy alta y además se pueden acabar convirtiendo en un simple ejercicio de memoria. Los trabajos escritos pueden considerarse una variedad de los anteriores. Procedimiento muy interesante, aunque costoso, lo que le da carácter de complementario. En muchos casos se adapta mejor a la realización en grupo que a la individual. Las preguntas cortas, miniensayos, problemas teóricos son de gran utilidad en algunas disciplinas y su uso es bastante habitual. Sus características métricas, en el caso de estar bien diseñadas, son relativamente buenas porque pueden mejorar bastante la validez del contenido y la fiabilidad de los ensayos largos. Son muy útiles para validar la comprensión y la aplicación, aunque lo son en menor medida para evaluar operaciones superiores tipo análisis o síntesis. Su nivel teórico de eficiencia es bastante alto. Los problemas y ejercicios de aplicación son un elemento fundamental en cualquier proceso de evaluación en muchas disciplinas , sobre todo en la evaluación de criterio. Su fiabilidad teórica es alta y su validez de contenido puede ser relativamente alta. Pruebas y cuestionarios de tipo cerrado son otros elementos fundamentales para la evaluación, aunque hay que diferenciar entre los distintos tipos existentes, puesto que aunque la validez de contenido es teóricamente muy alta no ocurre lo mismo con la fiabilidad. Existe el peligro de quedarse en aspectos puramente memorísticos; sin embargo su mayor potencial se centra en la evaluación de la comprension de términos, conceptos y principios. Mientras las cuestiones de doble alternativa tienen problemas de fiabilidad, las cuestiones de elección múltiple son de gran utilidad para todo tipo de evaluación si se centran en el nivel de comprensión. La evaluación portfolio es la recogida de muestras de trabajo de los estudiantes como reprenstación de su rendimiento sobre un eterminado objetivo educacional. Tabla 1 El MEC (2003) informa a los alumnos de los distintos tipos de evaluación: ventajas, inconvenientes y requisitos. Ventajas Permiten al examinador aclarar, repetir, ayudar… Oral Sirven de incentivo al examinado por sentirse observado con atención. Inconvenientes Requisitos Buena fluidez verbal. Son poco frecuentes. Poco tiempo para pensar la respuesta. Mayor grado de ansiedad. Buena capacidad de reacción. Capacidad de organización rápida. Dominio seguro de la materia de examen. Buena distribución del tiempo. Confundir el enfoque del tema. Capacidad para relacionar distintos contenidos. Distribución del tiempo. Buena redacción. Redacción. Aprendizaje general de la materia. Confundir el enfoque de las preguntas. Capacidad de síntesis y de relacionar conceptos. Sintetizar bien en el espacio disponible. Memoria Redacción. Dominio de la materia. Corrección objetiva. Trabajar deprisa. Capacidad para trabajar rápidamente. Facilitan el recuerdo. Penalizan los errores. Técnica familiar. Desarrollo Sensación de tranquilidad y seguridad Técnica familiar. Preguntas Cortas Pruebas Objetivas Sensación de tranquilidad y seguridad. Cuestiones similares a actividades de clase. Buena redacción . Leer y comprender toda la materia. En cuanto a la clasificación temporal, básicamente existen dos tipos de evaluación: contínua o puntual. Continua: El paradigma de este tipo de evaluación sería la evaluación instantánea de los conocimientos de los alumnos. La evaluación portfolio es el ejemplo más significativo de este tipo; pues reúne el trabajo realizado pro el alumno durante el periodo lectivo de la asignatura. Puntual: Sigue siendo el proceso más utilizado en la enseñanza y consiste en la exposición de conocimientos por parte de lso alumnos normalmente mediante un examen escrito en el que se pueden reunir pruebas objetivas, cuestiones de desarrollo y problemas. 3 LAS PRUEBAS OBJETIVAS EN LA EVALUACIÓN Se ha comprobado que la utilización de pruebas objetivas para la evaluación, sobre todo en el caso de grandes grupos, es muy adecuada y aunque una buena preparación de estas es muy compleja, permiten una "fácil" corrección siendo ésta una ventaja entre otras como pueden ser la posibilidad de evaluar sistemáticamente niveles superiores de actividad mental o la objetividad de la corrección. La introducción del ordenador ha dotado de un instrumento rápido y preciso con un amplio campo de posibilidades a las pruebas objetivas que se materializan en numerosos proyectos de creación de aplicaciones para PC y para web que permiten la creación de tests y su corrección. 4 LAS PRUEBAS OBJETIVAS Y LAS NUEVAS TECNOLOGÍAS A continuación presentamos dos ejemplos desarrollados en la Escuela Universitaria de Ingenieros Técnicos Industriales de Gijón que pretenden facilitar el uso de las pruebas objetivas a través de Internet. El primer ejemplo utiliza tecnologías PHP de programación que nos permiten mantener una gestión de asignaturas, temas e incluso de manejo de pruebas. El segundo ejemplo es una aplicación práctica de las tecnologías FLASH para la web. Veremos un estilo de test nada convencional que ha tenido una enorme aceptación entre los alumnos. 4.1 Fig. 1 Ejemplo de utilización de pruebas objetivas en aplicaciones multimedia. El programa es GIcad y la aplicación de la que forma parte AIMEC-DT La tecnología PHP PHP es un lenguaje de programación el cual se ejecuta en los servidores web y que te permite crear contenido dinámico en tus páginas HTML. Dispone de múltiples herramientas que te permiten acceder a bases de datos de forma sencilla, por lo que es ideal para crear tus aplicaciones para Internet. Es multiplataforma, funciona tanto para Unix (con Apache) como para Windows (con Microsoft Internet Information Server) de forma que el código que se haya creado para una de ellas no tiene porqué modificarse al pasar a la otra. Fig. 2 Página web de acceso a phpTest alojada en un servidor propio Linux. El acceso distingue profesores de alumnos. La sintaxis que utiliza, la toma de otros lenguajes muy extendidos como C y Perl, por lo que si estás familiarizado con estos, con PHP te encontrarás como en casa. Fig. 3 Página web de phpTest. Resolución de un test del tema de Tornillos de la asignatura Dibujo Industrial. 4.2 La tecnología FLASH Flash es una tecnología desarrollada por Macromedia que permite crear y reproducir contenido web basado en vectores. Gracias a esta característica, el texto puede utilizar cualquier tipo de fuente y determinadas animaciones se reproducen en menos tiempo del habitual. Para reproducir estas ventajas necesita el reproductor Macromedia Flash Player. Si no está instalado en su sistema puede descargarlo desde el sitio de Macromedia [http://www.macromedia.com]. El reproductor es gratuito y le permite reproducir miles de páginas que ya utilizan esta tecnología. El 90% de los usuarios tienen alguna versión de Flash instalada. Se ha utilizado esta tecnología para crear una conjunto de tres test acerca de temas relacionados con la Expresión Gráfica: Sistema Diédrico, Geometría y CAD. Fig. 4 Pantalla inicial del Gran Test de Expresión Gráfica Flash nos permite dar al test una apariencia más atractiva para los alumnos y sobre todo, aprovechando el servicio ofrecido por la web diseñada para albergar toda la información docente del área en la EUITIG [http://aegi.euitig.uniovi.es], los alumnos pueden realizar el test tantas veces como deseen a través de Internet. Una vez terminado el test, el programa le muestra al alumno el número de errores y aciertos durante la prueba. No le muestra en cuál se ha equivocado porque pensamos que así puede repetir el test con el fin de que sea él mismo quien descubra los errores. Fig. 5 Interfaz de una pregunta del Gran Test de Expresión Gráfica Gracias a su sencilla programación, es posible añadir nuevas preguntas de test de un modo sencillo y rápido lo que facilita la expansión y diversidad de las preguntas. 5 LAS PRUEBAS OBJETIVAS EN CLASES MAGISTRALES Uno de los mayores problemas a los que nos enfrentamos los profesores año a año es la pasividad (incluso ausencia) de un tanto por ciento muy elevado de nuestros alumnos durante las clases teóricas. Es importante enfrentarse a este problema e intentar proponer nuevas soluciones, aunque éstas resten tiempo de docencia. Citando a J.M. Álvarez (2001): “El camino de la innovación y de la renovación que lleve a otras formas de evaluación consiste en convertir la clase, el tiempo, en tiempo y lugar de aprendizaje. Restar tiempo de clase, distrae la atención que merece la pena: aprender, descubrir, contrastar, reflexionar, recrear, dialogar, disfrutar, comprender, enriquecerse con los bienes culturales. El tiempo de clase convertido en tiempo de aprendizaje facilitado, ayudado, orientado por la enseñanza debe convertirse en una oportunidad simultánea de evaluación. Solo por esta vía podremos hacer del proceso enseñanza y de aprendizaje un único proceso interactivo y solidario de colaboración.” La propuesta que aquí exponemos es la utilización de ejercicios tipo test durante las lecciones teóricas de las asignaturas del siguiente modo: Antes de comenzar la explicación, se entrega a los alumnos un breve cuestionario que recoja en preguntas concisas y directas lo más importante que se vaya a explicar durante la clase. Después de leerse las cuestiones, los alumnos podrán ir respondiéndolas según el discurrir de la clase teórica. Finalmente, el profesor recogerá y analizará estas pruebas. ¿Qué se pretende con estas pruebas de evaluación? 1. Mantener la atención de los alumnos durante una clase magistral. 2. Obtener una primera evaluación de la atención prestada. Indudablemente un alumno ante esta táctica educativa, cambia su rol de alumno pasivo por uno más activo y atento buscando la respuesta a las preguntas planteadas. Este test de conocimientos debe ser evaluativo con el fin de motivar aún más al alumno y para dar al docente una idea de atención durante sus clases. No se puede generalizar este método a todas las clases magistrales; pues muchas de ellas requieren de toma de apuntes o resolución de ejercicios, pero sí se pueden acoplar, durante el curso académico, determinadas sesiones donde prime la atención sobre los apuntes. Fig. 6 Ejemplo de test presencial durante la clase de teoría. Preguntas correspondientes a un tema de ROSCAS de la asignatura de Dibujo Industrial. 6 CONCLUSIONES Las pruebas objetivas son una de las metodologías de evaluación de alumnos más dinámicas; pues son fácilmente adaptables por parte del profesor a los conceptos impartidos y tienen una validez bastante aceptable de los conocimientos de los alumnos. En la actualidad, la mayoría de este tipo de evaluaciones viene ligada a una prueba final una vez impartida la materia. Por el contrario, presentamos una metodología que pretende incluir a las pruebas objetivas en la evaluación continua y diaria de un alumno y que a su vez le sirva como un apoyo didáctico diario. Las Nuevas Tecnologías nos permiten la creación y resolución de tests a través de Internet (PHP) y de crear tests atractivos gracias a la tecnología FLASH. Estas herramientas se han comenzado a utilizar durante el curso 2002- 03 en asignaturas de Expresión Gráfica de la Escuela Universitaria de Ingenieros Técnicos Industriales de Gijón. Otra de las propuestas planteadas es la utilización de tests en las clases magistrales presenciales que comenzará a utilizarse en la asignatura de Dibujo Industrial de segundo curso en la misma Escuela de Gijón. 7 REFERENCIAS Alvarez, J.M. (2001). Evaluar para Conocer, Examinar para Excluir. Ediciones Morata. Ariza, A. (2003). Evaluación y medición: comparación de cuatro maneras de medición asistidas por ordenador. Revista de Medios y Educación, Número 16. [http://www.sav.us.es/pixelbit/articulos/n16/n16art/art1610.htm] De la Cruz, M.A. (2001). Cómo mejorar nuestras clases: el aprendizaje activo y cooperativo en grupos grandes. Universidad de Oviedo. De Praetere, T. (2003). [http://www.claroline.net/] Open Source e-Learning Platform. Escudero, T. (2001). La evaluación del rendimiento de los estudiantes como actividad docente. Programa de formación para la docencia universitaria. Universidad de Oviedo. García, A. (2002). Elaboración de pruebas objetivas. Ventajas e inconvenientes de su utilización. IV Semana de Investigación. Facultad de Psicología. [http://www.uned.es/psicologia/IVSemana/mesa.htm#Elaboración] Lambertini, R. (2003). Pruebas objetivas. Síntesis de 20 productos del Currículo Paralelo. [http://www.nalejandria.com/akademeia/rbarale/pruebasobjetivas.htm] Matute, M. (1989). Prácticas de Dibujo Técnico. Test de Normalización. MEC, (2003). Cómo se hacen los diversos tipos de exámenes. La web del estudiante. Ministerio de Educación y Cultura. [http://www.cnice.mecd.es/recursos2/estudiantes/aprender/op_03.htm]. Trigos, E. (2002). PHP 4. Ed. Anaya Multimedia. 288 pp. ISBN: 84-415-1079-2.