Proyecto de Diseño de Interfaces Evaluación de Usabilidad El escenario Ud. pertenece a una empresa consultora de software educativo, la cual fué contratada para evaluar un material instruccional. Su cliente requiere una evaluación heurística, seguida por un test de usabilidad “piense en voz alta” (thinking aloud usability test), La idea es identificar el máximo número de problemas de usabilidad y alimentar ésta entrada dentro de la próxima fase de diseño. Fases del proyecto semana 3 Evaluacián Heurística de tres software educativos semejantes al suyo (individual + en grupo) 10% semana 4 Evaluación Heurística de tres software de sus compañeros (individual) 10% semana 5 Evaluar su software con un test de usabilidad “piense en voz alta” (thinking aloud usability test), con seis usuarios mínimo ( en grupo). 10% semana 6 Realizar un Poster con su nuevo diseño (en grupo) 15% semana 10 Monografía (Individual). Comparación entre los principios de la heurística de Nielsen y la teoría Psicológica del aprendizaje que Ud. estudió Por ejemplo: Teoría constructivista, teoría conductista, etc. semana 11 Realizar el prototipo (en grupo) 20% 1ª. PARA CONDUCIR LA EVALUACIÓN HEURÍSTICA Primero que todo lea el capítulo 5 del Libro Usability Engineering de Jacob Nielsen y los archivos que les envié por correo. La experiencia obtenida en el taller dictado en clases es muy importante. Considere la población de usuarios y las tareas típicas que realizan. 1. Inspecciones la interfase individualmente, anote problemas e impresiones positivas. 2. A cada problema, tal como se hizo en clases según el formato: se describe el problema, se identifica el principio violado y se hace una sugerencia de cómo resolverlo. Asigne un grado de severidad a cada problema (escala del 1-4) 3. Haga una copia de la pantalla de cada problema y de cada hallazgo positivo (Print Screen, pegar en Paint brush y salvar el archivo como JPEG). Se puede sustituir por una explicación detallada de la ubicación del problema dentro del software. 4. Haga una lista de los hallazgos positivos HASTA AQUÍ ES INDIVIDUAL 5. Por el grupo: número del problema, principio que viola, ubicación, descripción del problema, sugerencia de como resolverlo y grado de severidad. (Obtenga el promedio del grupo, para cada problema) 6. Ordene los problemas en orden descendiente de acuerdo al promedio de severidad. 7. Analice sus resultados 1b) El reporte de la evaluación Heurística 1. Escriba un reporte corto de la evaluación heurística que contenga: 2. El título de la página indicando el título de la evaluación y los nombres de los integrantes del grupo 3. Una página de resumen de su evaluación para el gerente de la compañía 4. Una descripción del ambiente (hardware, versión del software, S.O., día de la evaluación, etc.) usado por cada evaluador 5. Discusión de los hallazgos positivos 6. Análisis y discusión de los cinco problemas más graves (ilustrados con copias de las pantallas) 7. Agregar lista de problemas en orden descendiente de severidad 8. Incluya como un apéndice la data proveniente de todas las evaluaciones individuales 9. Publíquelo en su página Web. PLANIFICACIÓN DEL TEST “PIENSE EN VOS ALTA” Establezca las características del perfil de sus usuarios Seleccione 5 usuarios, que posean el perfil descrito por usted, para realizar el test Diseñe el cuestionario de Background y la forma de consentimiento (si va a realizar video) Diseñe el texto de orientación para el usuario, donde se le explica en que consiste el test. Realice cualquier entrenamiento del usuario que sea necesario. Por ejemplo si el usuario no sabe operar computadores debe entrenarlo primero antes de hacer su test. Planee un demo de como pensar en voz alta Diseñe unas tareas representativas, 30 a 40 minutos por usuario Diseñe su tabla de datos ( para las notas del observador) Diseñe la estructura de la entrevista con los usuarios, 10 minutos Procedimiento del Test “Piense en voz alta” Seleccione 6 usuarios Realice un test piloto Test un usuario, tomado de la población seleccionada por usted Opcional: usted puede hacer un video de todo lo que ocurre desde el momento en que el usuario entra al salón hasta que se retira del mismo. Haga copia de las pantallas de problemas interesantes y hallazgos positivos en el día del test Test real Examine 5 usuarios Haga copia de las pantallas de problemas interesantes y hallazgos positivos en el día del test Analice el protocolo del video (si lo hizo) y sus notas Reporte del test “Piense en voz alta” El Reporte del test “Piense en voz alta”debe contener (Lo que está en negrita es obligatorio) 1. Una página de portada donde indica el título de la evaluación y el nombre de los componentes del grupo 2. Un resumen de los problemas de usabilidad más importantes encontrados en la interface durante su test. 3. Metodología, plan del test, que asumió Ud acerca de la población de usuarios y sus tareas típicas, el proceso de selección de los usarios, entrenamiento de los usuarios realizado, tareas del test. 4. Ambiente del test: Hardware, versión del software, sitio donde se realizó el test, fecha en el que el test fue realizado,1 o 2 fotos de los participantes “en acción” en el sitio (opcional). 5. Tabla de Datos de los usuarios (edad, ocupación, experiencia, etc), tomados a partir del cuestionario de background) 6. Trascripción del test. la cronológica de eventos, comentarios, problemas. Si hizo el video agregar a la tabla los registro de referencias del tiempo en el video (hh:mm:ss) 7. Discusión y análisis. Impresiones generales, principales problemas que los usuarios enfrentaron desde su punto de vista, análisis de la entrevista, sugestiones de los usuarios, que les llamó la atención, que les gustó. 8. Lista de hallazgos positivos. 9. Lista de recomendaciones. Para cada recomendación El diagnóstico de por qué ocurrió el problema Ilústrelo con una copia de la pantalla Evalúe su severidad (escala del 1-4) Establezca cuantos de los usuarios examinados experimentaron el mismo problema Incluya la referencia de tiempo en el video (opcional) donde ocurrió el problema Si es posible incluya algunas de las frases de los usuarios que ilustran alguno de los puntos de su informe Describa sus sugestiones para mejorar el producto 10. Incluya toda la data cruda, como apéndice en el reporte impreso: background, cuestionario, formas de consentimientos firmadas, texto de orientación, vídeo tape (opcional), las notas, etc 11. Publíquelo en su página Web. Y entregue el documento en clase. MONOGRAFÍA INDIVIDUAL Diseño y Evaluación de las intefaces del Software Educativo Normas de interacción, que debe poseer las interfaces del software educativo, derivadas de la teoría de aprendizaje que Ud. estudió. Ud producirá un instrumento de evaluación, a partir de esta teoría, así por ejemplo un software educativo que cumpla con la teoría de aprendizaje de Robert Gagne, debe cumplir con las siguientes normas.... Comparación de estas normas con los principios de la Heurística de Nielsen, donde coinciden, donde difieren, etc. Cuales otros tipos de evaluación del software educativo Ud. propone (3 más por lo menos).