en otra ventana

Capítulo VI
Pruebas de Usabilidad y Resultados
En este capítulo se describen las pruebas de usabilidad que se aplicaron a la interfaz
con el fin de medir el impacto que tuvo en los usuarios así como si se cumplió el objetivo de
incrementar la carga emotiva siguiendo el esquema de interfaces afectivas síncronas.
6.1 Pruebas de usabilidad
Las pruebas de usabilidad se realizaron, siguiendo diferentes técnicas para medir el
desempeño de la aplicación, así como la experiencia de los usuarios. Las técnicas utilizadas
fueron: El uso de métodos inductivos como cuestionarios y entrevistas.
Los cuestionarios fueron diseñados en base a la técnica propuesta por Likert citado en
[Hernández 1991]. También captura de video y para análisis posterior, dentro de la técnica de
video se utilizó también la técnica de “pensar en voz alta” (“Thinking Aloud”) [Nielsen1993]
para analizar la experiencia de usuario.
6.1.1 Objetivos
Los puntos importantes que se buscaron medir fueron: a) Si se logra una mejora
significativa en la comunicación. b) Si se logra aumentar la carga emotiva con la aplicación.
6.1.2 Usuarios para la prueba
Se seleccionaron usuarios que normalmente utilizan aplicaciones síncronas de tipo chat
para comunicarse. Se aplicó la prueba a 10 usuarios en parejas. La relación costo beneficio es
menor según [Nielsen 1993], aplicando las pruebas de 3 a 5 usuarios.
6.1.3 Locación y preparación de la prueba
La prueba se realizó en el laboratorio de ICT (Interactive and Cooperative
Technologies) de la Universidad de Las Américas, Puebla.
Los usuarios en parejas se situaron en paralelo en dos áreas aisladas y su único medio
de comunicación entre ellos era el ambiente de conversación a probar.
Cada usuario contó con una computadora PC con acceso a Internet y un navegador de
Internet.
6.1.4 Ejecución de la prueba
Antes de comenzar la prueba a los usuarios se les dio una pequeña introducción verbal
sobre el ambiente de conversación y sus funciones y el objetivo. Posteriormente se dio paso a
la prueba.
Durante la prueba los usuarios eran monitoreados por una cámara de video que registró
sus expresiones e interacción con la aplicación, así mismo se grabó la señal de video de los
monitores de los usuarios. Tanto el video de los usuarios como el video de los monitores, Se
revisaron posteriormente para analizar la forma de interactuar de los usuarios y sus reacciones
a la aplicación. Durante la prueba, se brindó ayuda a los usuarios que requirieron asistencia
La prueba consistió en 3 etapas:
a) Interacción libre de conversación entre los usuarios
b) Tareas asignadas. (Escenarios emotivos propuestos)
c) Responder a un cuestionario, sobre su experiencia con la aplicación y su
experiencia emotiva.
Duración aproximada de la prueba por parejas de usuario: 25 min.
6.2 Resultados de las pruebas
El análisis e interpretación de los resultados de estas pruebas son fundamentales para
evaluar si se lograron algunos de los objetivos planteados. A continuación se presentan los
resultados de los cuestionarios aplicados a los usuarios, el análisis de videos y el resultado de
las entrevistas con los usuarios.
6.2.1 Resultados cuestionarios aplicados a usuarios
Es muy importante medir la utilidad del panel, para saber de que manera lo percibían
los usuarios. En la Figura 6.1 se muestra el resultado a la pregunta ¿Te parece útil contar con
un panel emotivo en el Chat? Como podemos ver en la Figura 6.1 mayoría de los usuarios les
pareció de utilidad contar con el panel emotivo.
¿Te parece útil contar con un panel emotivo en el Chat?
70%
70%
Usuarios Muestra = 10
60%
50%
40%
30%
30%
20%
10%
0%
Inútil
Poco útil
Indiferente
Útil
Muy útil
2a prueba de usabilidad
Figura 6.1 Pregunta 1 cuestionario usuarios segunda prueba usabilidad
El punto de mejora de la comunicación con esta interfaz, es un punto muy importante
para el desarrollo de este proyecto ya que es uno de los puntos principales fijados como metas.
En la Figura 6.2 podemos verificar el resultado, a la pregunta sobre este punto en el
cuestionario aplicado a los usuarios durante la prueba el cual se encuentra en el apéndice C de
este documento.
¿Esta Herramienta te ayudó a mejorar la comunicación?
100%
100%
Usuarios muestra =10
90%
80%
70%
60%
50%
40%
30%
20%
10%
0%
Nada
Poco
Indiferente
Medio
Mucho
Seguna prueba de usablidad
Figura 6.2 Pregunta 2 Cuestionario usuarios
Los usuarios respondieron de manera muy clara, su experiencia en cuanto al
mejoramiento de la comunicación como se muestra en la Figura 6.2 anterior.
El diseño del panel fue uno de los puntos que es muy importante, se buscó que fuera
sencillo y fácil de utilizar para los usuarios, para evitar que al introducir un elemento nuevo al
Chat al contrario de mejorar la comunicación resultara una barrera. Por esto, el diseño se ideó
lo más sencillo posible. Como podemos ver en la Figura 6.3. Dos terceras partes de los
usuarios mencionaron que les pareció fácil la interacción con el panel emotivo.
¿Es fácil utilizar el Panel emotivo?
70%
70%
Usuarios muestra = 10
60%
50%
40%
30%
30%
20%
10%
0%
Nada
Poco
Indiferente
Fácil
Muy Fácil
2a prueba de usabilidad
Figura 6.3 Pregunta 3 Cuestionario usuarios
Siguiendo con la misma idea de un diseño simple para no interrumpir la comunicación,
formulamos la siguiente pregunta, para que los usuarios evaluaran el diseño. Los resultados
los podemos ver en la Figura 6.4. La percepción en general fue buena ya que la mayoría se
expreso de manera favorable al diseño de la interfaz cuando se les pregunto en la encuesta de
la prueba de usabilidad.
¿Que te parece el diseño de la interfaz?
40%
40%
Usuarios Muestra = 10
35%
30%
30%
30%
25%
20%
15%
10%
5%
0%
Malo
Regular
Indiferente
Bueno
Muy Bueno
2a prueba de usabilidad
Figura 6.4 Pregunta 4Cuestionario Usuario
La carga emotiva es el gran reto que se presentó y sigue vigente para los futuros
diseños y aplicaciones de comunicación en tiempo real entre personas. Para lograr una
comunicación efectiva, no se deben dejar a un lado las emociones. En la Figura 6.5 nos
referimos a ello. El 67% expreso que la interfaz le ayudo a mejorar la comunicación de una
manera media y el 33% indico que mejoro significativamente la comunicación al usar la
interfaz.
¿Esta interfaz puede ayudar a compartir y transmitir mejor
tus ideas?
70%
70%
Muestra usuarios = 10
60%
50%
40%
30%
30%
20%
10%
0%
Nada
Poco
Indiferente
Media
Mucho
2a prueba de usabilidad
Figura 6.5 Pregunta 8 Cuestionario Usuarios
Sabemos que actualmente existen interfaces de tipo síncrono para la comunicación
entre personas las cuales incorporan elementos emotivos en su interfaz. En la Figura 6.6 se
pone a prueba la percepción de los usuarios, respecto a si existe una mejora en la
comunicación tomando como referencia estas interfaces. El 100% de los usuarios que
asistieron a la prueba expresaron que comparando con las interfaces comerciales si se logra
una mejora media en la comunicación
¿Comparado con un "Chat" tradicional que tanto mejora
la comunicación?
100%
100%
Usuarios Muestra = 10
90%
80%
70%
60%
50%
40%
30%
20%
10%
0%
Nada
Poco
Indif erente
Medio
Mucho
Segunda preuba de usabilidad
Figura 6.6 Pregunta 9 Cuestionario Usuarios