Influencia del Sujeto Experimental

Las diferencias entre sujetos se aproximan mucho a ser significativas en las medidas de tiempo por tarea, aunque no en la precisión.

Medida GDL F p Significativo

Tiempo/tarea 11, 23 2.703 0.0509 Aprox.

Tiempo neto/tarea 11, 23 2.639 0.055 Aprox.

T. neto/doc. Correcto 11, 23 1.349 0.306 No

Doc. correctos/tarea 11, 23 1.107 0.430 No

Fracc. doc. Correctos 11, 23 1.011 0.489 No

Fracc. doc. Solicitados 11, 23 1.789 0.166 No

Tabla 27: Influencia del Sujeto Experimental en las medidas de tiempo y precisión.

Figura 35: Tiempo neto por tarea de cada sujeto en los exploradores 3D y textual Representamos en la Figura 35 las medias de los resultados normalizados de tiempo neto por tarea obtenidos por cada sujeto en ambos exploradores. En este diagrama, los puntos situados arriba y a la derecha corresponden a sujetos que han ejecutado lentamente las tareas de búsqueda con ambos navegadores, estando los sujetos más rápidos situados abajo y a la izquierda.

De la misma forma, los puntos situados arriba y a la izquierda corresponden a sujetos más rápidos con el explorador 3D que con el textual, y lo contrario para los puntos situados abajo y a la derecha. La línea diagonal de puntos corresponde a la igualdad de velocidad con ambos

Aplicación de Entornos Virtuales para la Exploración y Búsqueda de Información

144 NAVEGACIÓN

navegadores. Las medidas son adimensionales, ya que reflejan el cociente entre tiempos en segundos invertidos por el usuario en cada tarea, y la media de tiempos de todos los usuarios en la misma tarea.

En el diagrama se observa que existen importantes diferencias intrínsecas entre los sujetos, que se reflejan en medidas normalizadas medias entre 0.45 y 1.4. También se aprecia el efecto aprendizaje, ya que la mayoría de los sujetos que obtienen mejores resultados con el explorador 3D lo han utilizado en la segunda sesión (experimentos en orden T - E).

Con independencia de lo anterior, sólo uno de los sujetos obtiene mejores resultados con el explorador textual. Con excepción de ese caso, la muestra de sujetos se divide a partes aproximadamente iguales entre sujetos que obtienen resultados similares para ambos exploradores, y los que obtienen resultados notablemente mejores con el explorador tridimensional.

La correlación entre los resultados experimentales de los sujetos y sus respuestas a los cuestionarios previo y posterior nos da información adicional sobre los factores que pueden influir en los resultados.

El cuestionario previo recoge la opinión del sujeto sobre su propia experiencia y conocimientos sobre ordenadores, habilidad espacial, preferencia por probar y conocer nuevos programas, y frecuencia de realización de tareas de búsqueda de información.

Se ha calculado el coeficiente de correlación entre los vectores de respuestas a cada una de las preguntas del cuestionario, y cada una de las medidas experimentales (media de las tareas realizadas por el sujeto). A partir del coeficiente de correlación, se determinó la probabilidad de que la correlación sea significativa, como función t de Student de dos colas.

Medida Experiencia ordenadores Habilidad espacial Probar nuevos programas Buscar información Tiempo/tarea -0.262 0.484 -0.505 0.125 Tiempo neto/tarea -0.373 0.408 -0.506 0.166 T. neto/doc. correcto -0.470 0.392 -0.548 0.016 Doc. correctos/tarea 0.469 -0.146 0.155 0.184 Fracc. doc. correctos -0.236 -0.449 0.083 0.436 Fracc. doc. solicitados 0.372 -0.426 0.247 0.242

Tabla 28: Coeficientes de correlación entre medidas y cuestionario previo

Medida Experiencia ordenadores Habilidad espacial Probar nuevos programas Buscar información Tiempo/tarea 0.388 0.093 0.078 0.684 Tiempo neto/tarea 0.209 0.166 0.078 0.588 T. neto/doc. correcto 0.105 0.185 0.052 0.959 Doc. correctos/tarea 0.106 0.635 0.612 0.547

Fracc. doc. correctos 0.438 0.124 0.789 0.137 Fracc. doc. solicitados 0.211 0.146 0.417 0.426

Evaluación Empírica 145 Existe una correlación que se aproxima a ser significativa entre la preferencia e interés manifestados por probar nuevos programas, y la velocidad con que se ejecutan las tareas de búsqueda con los exploradores. La razón parece estar en un efecto aprendizaje más rápido e intenso en los sujetos que, por su mayor interés, probablemente están más habituados a probar programas y a inducir rápidamente su modo de empleo y características. Para contrastar esta idea, se han calculado los cocientes entre las medidas obtenidas en el primer y segundo experimentos de cada sujeto, realizando la media de los sujetos con una preferencia manifestada por probar nuevos programas de grado alto o superior por una parte, y de grado medio o inferior por otra, con los siguientes resultados:

Medida Interés alto

o muy alto Interés bajo o medio Tiempo/tarea 2.472 1.726 Tiempo neto/tarea 2.465 1.542 T. neto/doc. correcto 2.559 1.731 Doc. correctos/tarea 2.231 1.275

Fracc. doc. correctos 2.216 0.870

Fracc. doc. solicitados 2.200 1.043

Tabla 30: Aprendizaje en función del interés en probar nuevos programas

Por tanto, el interés y hábito de probar nuevos programas se relaciona con una reducción muy rápida del tiempo para ejecutar tareas en el segundo experimento, pero también con una ligera reducción de la precisión de los resultados. Esta reducción, que no es estadísticamente significativa, es explicable por la velocidad mucho mayor de ejecución de las tareas experimentales.

En cambio, la percepción de la propia habilidad espacial como alta parece ser un factor que influye negativamente, en forma de mayores tiempos de ejecución y menores cifras de documentos correctos, aunque esta correlación no se aproxima tanto como la anterior a ser significativa (p = 0.093). Este efecto es muy reducido en magnitud, y requeriría pruebas adicionales para contrastar su magnitud y causa, pero podría estar relacionado con un cierto exceso de confianza en la propia habilidad de interpretación espacial.

El cuestionario posterior a la prueba recoge opiniones del sujeto sobre la herramienta de exploración tridimensional, centradas en cuatro aspectos concretos: sus cualidades de interesante y atractiva, que causa desorientación y confusión, práctica y útil para la búsqueda de información, o que requiere un mayor tiempo de aprendizaje para aprovechar sus posibilidades.

Al igual que para el cuestionario previo, se han calculado los coeficientes de correlación y probabilidad de que la correlación sea significativa, como función t de Student de dos colas.

Aplicación de Entornos Virtuales para la Exploración y Búsqueda de Información

146 NAVEGACIÓN

Medida Atractivo Causa

desorientación Práctico y util Requiere tiempo Tiempo/tarea -0.133 -0.078 -0.446 -0.378 Tiempo neto/tarea -0.191 -0.041 -0.514 -0.296 T. neto/doc. correcto -0.316 0.074 -0.586 -0.358 Doc. correctos/tarea 0.359 -0.225 0.221 0.339 Fracc. doc. correctos -0.021 -0.079 -0.245 0.272 Fracc. doc. solicitados 0.329 -0.306 0.173 0.340

Tabla 31: Coeficientes de correlación entre medidas y cuestionario posterior

Medida Atractivo Causa

desorientación Práctico y util Requiere tiempo Tiempo/tarea 0.665 0.800 0.126 0.202 Tiempo neto/tarea 0.531 0.894 0.072 0.327 T. neto/doc. correcto 0.294 0.809 0.035 0.230 Doc. correctos/tarea 0.228 0.460 0.468 0.258

Fracc. doc. correctos 0.945 0.797 0.419 0.368 Fracc. doc. solicitados 0.273 0.309 0.571 0.255

Tabla 32: Probabilidad de correlación no significativa entre medidas y cuestionario posterior

Existe una correlación negativa entre la percepción del explorador 3D como práctico y útil, y las medidas de tiempo. Esta correlación se aproxima a ser significativa (p = 0.072) para el tiempo neto por tarea, y es significativa (p = 0.035) para el tiempo neto por documento recuperado correctamente. Por tanto, los sujetos que perciben el explorador 3D como práctico son los que consiguen ejecutar más rápidamente las tareas, aunque no hay una relación similar con aquellos que obtienen mayor acierto al seleccionar documentos. Probablemente este efecto se debe a que los sujetos que encuentran rápidamente la información que buscan reciben inmediatamente una impresión favorable, mientras que durante los experimentos los sujetos no reciben información acerca de la corrección de los documentos que seleccionan.