PRUEBAS USABILIDAD

Las pruebas de usabilidad que se realizaron buscaron identificar principalmente tres cosas. Primero, la correcta funcionalidad y aceptación del aplicativo por parte de los usuarios. La segunda, el nivel de retención de información por parte de estos. Por último, medir los tiempos que se demora un usuario en realizar una tarea de navegación asignada.

Para la primera medición se utilizó un cuestionario basado en un modelo TAM (Technology Acceptance model) que permite medir la satisfacción de los usuarios con determinada tecnología.

1 2 3 4 5

1 Creo que me gustaría usar más seguido esta aplicación.

2 Encontré que el sistema es innecesariamente complejo. 3 Creo que los conceptos que se

muestran son fáciles de encontrar. 4 Creo que los ambientes 3D donde se

muestra la información facilita mi comprensión.

5 Encontré la interfaz de navegación fácil de usar e intuitiva.

6 Encontré que el sistema es incómodo de usar.

7 Creo que el uso de modelos 3D junto con la definición de un término me ayuda relacionar entre conceptos. 8 Considero que el uso las manos para

la navegación es complicado.

9 Considero innecesario poner el texto cuando ya hay una voz que me lee la información.

Tabla 4. Cuestionario de satisfacción de usuarios basados en el modelo TAM.

Basados en el cuestionario presentado en la tabla 4, se pretende identificar los siguientes factores.

92

• Identificar los factores generales que pueden afectar la aceptación de un modelo 3D para la navegación de ontologías.

• Evaluar la aceptabilidad por parte de los usuarios al usar la aplicación.

Por otro lado, como se puede ver en la tabla 5, para evaluar el nivel apropiación de conocimiento se realiza un pequeño test conformado por cinco preguntas básicas.

1. Las tres edades o periodos que se desprenden de la edad de piedra son: A. Paleolítico inferior, paleolítico medio y mesolítico.

B. Paleolítico, mesolítico y mesolítico superior. C. Paleolítico, mesolítico y neolítico.

D. No recuerdo.

2. Stonehenge es una estructura arquitectónica que corresponde al periodo del: A. Neolítico

B. Paleolítico C. Edad de bronce D. No recuerdo.

3. Las tres edades o periodos que se desprenden de la edad de los metales son: A. Neolítico, edad de bronce, edad de hierro.

B. Edad de cobre, edad de bronce y edad del carbón. C. Edad de cobre, edad de hierro y edad de bronce. D. No recuerdo.

4. El término “Kusanagi” hace referencia a:

A. Una antigua escultura egipcia de la edad de bronce. B. Una antigua espada japonesa de la edad de bronce. C. Una antigua estructura de la edad de hierro.

D. No recuerdo.

5. La gran pirámide de Giza se puede encontrar si se navega de la siguiente forma: A. Age of metals>copper age>architecture>Great pyramid of giza

B. Age of metals>Iron age>architecture>Great pyramid of giza

C. Age of metals>copper age>weapons and tools>Great pyramid of giza D. No recuerdo

93

Las preguntas se realizan después de que los usuarios hacen uso de la aplicación y han llevado a cabo las actividades que se han propuesto en la tabla 6.

ACTIVIDADES A REALIZAR POR EL ENCUESTADOR:

1. Pedirle al usuario que utilice la interfaz por 5 minutos después de haberle explicado la dinámica y uso de la aplicación (si mantiene presionado algún término este se

expande y se quiere navegar hacia atrás, basta con cerrar y abrir la mano). 2. Luego, pedirle que ubique la edad neolítica (neolithic) navegando por

Stone_age>neolithic. Seguido a esto, pedirle que vaya a arquitectura (architecture) y busque el término Stonehenge y que lea o ponga cuidado al audio.

3. Pedirle ahora que busque el término “Kusanagi” en la categoría de armas y herramientas (weapons and tools) de la edad de bronce. Pedirle que lea o ponga atención al término.

4. Pedirle ahora que busque la gran pirámide de giza (Great pyramid of giza) que se encuentra en la edad de cobre (sin decirle la categoría).

5. Pedirle que busque el término “cueva” en algún lugar de las categorías para las edades de piedra (paleolítico, mesolítico y neolítico).

Tabla 6. Actividades a llevar a cabo por parte del encuestador.

Con esto se busca conocer la facilidad con la que los participantes apropian conceptos de la ontología y si recuerdan el significado.

Se desarrollaron 15 tests en personas entre los 20 y los 26 años, todos estudiantes universitarios. Los resultados que se presentan a continuación se hacen basados en la escala SUS (System Usability Scale), donde se establece por estándar que una interfaz adecuada tiene un puntaje superior a 68.5 en encuestas de diez preguntas, ya que nuestro cuestionario se conforma solamente de nueve preguntas se realiza una conversión usando una regla de tres simple que arroja que el puntaje estándar para la aceptación según la escala SUS sería de 61.65. Para sacar los resultados basta con sumar los puntajes por encuesta y multiplicarlos por 2.25 (cuando son diez preguntas se multiplica por 2.5) estos resultados se registran y se grafican tal como se muestra en la tabla 6 y figuras 42 y 43.

94

Figura 42. Puntuación en la escala SUS para cada pregunta de las 15 encuestas realizadas. Fuente: propia.

Encuesta Total Valor escala SUS (2,25)

1 34 76,5 2 32 72 3 31 69,75 4 32 72 5 28 63 6 31 69,75 7 26 58,5 8 32 72 9 29 65,25 10 29 65,25 11 34 76,5 12 25 56,25 13 32 72 14 34 76,5 15 30 67,5

Tabla 7. Valores en la escala SUS para cada una de las 15 encuestas.

0 1 2 3 4 5 6 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 PUN TUA C IÓ N NUMERO DE ENCUESTA