3. PROCESO
3.1 DESARROLLO DEL PROYECTO
3.1.3 Resultados de la encuesta y conclusiones iniciales
Los resultados preliminares de la encuesta, pregunta por pregunta fueron los siguientes.
3.1.3.1 ¿Cuál es su sexo?
Gráfico 1. Resultados de la pregunta 1 de la encuesta
Para el desarrollo de toda la encuesta se eligieron 106 hombres y 106 mujeres como lo muestra el gráfico 1 con el fin de hallar un posible comportamiento entre ambos géneros, sin embargo, los comportamientos entre uno y otro no presentaron variación significativa a cada pregunta que se realizó en la encuesta. Los resultados, separando las opiniones de los hombres y de las mujeres pueden verse en el anexo 6 en donde se apreciará que no se justifica realizar un análisis
38
profundo a las diferencias en los comportamientos de los diferentes géneros, en el único es el correspondiente a la pregunta número 4 (5 en la encuesta) en donde hay una tendencia por los hombres a preferir la opinión de los críticos en ese sistema de calificación, mientras que las mujeres son guiadas por el público. Más allá de lo anterior, puede verse que si bien las líneas de tendencia no son exactas, tienen un mismo patrón de comportamiento que sujeto al margen de error elegido para la encuesta podría inferirse que son conductas similares entre uno y otro.
3.1.3.2 A continuación se presentan dos películas (A y B) de las cuales no se sabe el nombre, sino únicamente la calificación hecha por la audiencia y críticos del cine. Con base en lo anterior, ¿Cuál de las siguientes películas escogería para ver? ([X] = Significa que de todas las calificaciones realizadas, X fueron hechas por expertos)
Gráfico 2. Resultados de la pregunta 2 de la encuesta
El gráfico 2 muestra que el 32.1% de la población encuestada escogería para ver la película A cuya calificación es mayor que la B, mientras que el 67.9% se inclinaría por la película B cuya cantidad de opiniones por parte de los críticos es
39
mayor que la A. Con este resultado puede comprobarse la importancia de dotar al sistema de calificación de una escala de calificación normalizada (Allen, 2006) ya que como vemos para calificaciones similares (4.5 estrellas vs 4 estrellas) el factor decisivo para la elección es la cantidad de personas lo que esclarece que a mayor cantidad de votos mayor es la credibilidad que se le otorga a su calificación. Como se mencionó, en la elección de esta película puede observarse que las personas otorgaron mayor importancia a la calificación que tenía una mayor cantidad de votaciones por parte de expertos, sin embargo por observaciones en los comentarios y retroalimentaciones también existe la hipótesis en la dificultad de entender el significado de la simbología “[X]” y producto de ello la elección no se la hayan otorgado a los expertos sino al hecho de que el número que aparecía era más grande y por eso les daba una mayor confianza.
3.1.3.3 A continuación se presentan dos películas (C y D) de las cuales no se sabe el nombre, sino únicamente la calificación hecha por la audiencia. Con base en lo anterior, ¿Cuál de las siguientes películas escogería para ver? ((X) = Representa la cantidad de personas que calificaron las respectivas películas)
40 Gráfico 3. Resultados pregunta 3 de la encuesta
En el gráfico 3 el 55.7% escogió la película C mientras que el 44.3% lo hizo por la película D. Las diferencias entre una y otra referentes a la cantidad de información disponible son que la película C tiene una menor cantidad de valoraciones totales (23 contra 43 de la película D) y que los porcentajes de calificaciones negativas son diferentes, para la película D el porcentaje de calificaciones negativas es del 23.25 % mientras que para la película C son del 13.04 %.
Si bien no existe una preferencia claramente definida por alguna de las dos películas (10 puntos porcentuales de diferencia aproximadamente) puede inferirse que bajo los criterios expuestos en el párrafo anterior para la mitad de la población es relevante la proporción que hay entre calificaciones buenas y malas, y para la otra es relevante la cantidad de votaciones emitidas más no el porcentaje lo que coincide con los resultados obtenidos de la Gráfica 8.
3.1.3.4 A continuación se presentan dos películas de las cuales no se sabe el nombre (E y F), sino únicamente la calificación hecha por la audiencia y los críticos del cine. Con base en lo anterior, ¿Cuál de las
41 Gráfico 4. Resultados pregunta 4 de la encuesta
Según los resultados del Gráfico 4, al igual que en el gráfico 3 pero con una diferencia más cerrada en cuanto a preferencia (5 puntos porcentuales), no es posible establecer una tendencia para la elección de una película u otra, el 52.4% prefieren la película E mientras que el 47.6% restante prefieren la película F. Al encontrarse más cerrada la diferencia de una y otra se constituye que el cambio de la presentación de cantidad a porcentaje tiende a equilibrar las preferencias de los usuarios mostrando unas claras preferencias por la opinión del público mientras que otros lo hacen por la de los expertos.
Verificando el orden de presentación de las preguntas se ha visto que para cada sistema de calificación se ha agregado mayor información, y conforme se ha hecho esto la tendencia para la elección de una película u otra ha disminuido, del Gráfico 2 la única información disponible era la calificación y la cantidad calificaciones de un tipo de calificador (el experto), en esta situación la diferencia entre las preferencias fue de 35.8 %. Luego, por medio del Gráfico 3 se mostraron las preferencias de los usuarios con un sistema de calificación que mostraba información de la cantidad total de público que calificó, quienes lo hicieron y quienes no dieron su aprobación, datos que se constituyeron en herramientas para pensar mejor la elección y reducir la diferencia de preferencia a 11.4%. Finalmente, en el último sistema de calificación presentado se amplió la información mostrando por separado las calificaciones de cada tipo de usuario y mostrando su aprobación por medio de porcentajes con una calificación límite (de 3.5 para considerar aprobada una película), una vez más convirtiéndose esta
42
información adicional en activo para la toma de decisiones y reduciendo la diferencia de preferencia a 4.8%.
Producto de lo anterior se concluye que conforme mayor información tenga un usuario respecto a una publicación, o en este caso, una película más herramientas tiene para pensar y tomar una decisión de preferencia. Esto, como vemos da mayor credibilidad a las publicaciones ya que al tener calificaciones completamente diferentes, dotan a los usuarios de los elementos suficientes y necesarios para preferir un contenido u otro sin sesgar la tendencia a la elección centralizada de uno de ellos.
3.1.3.5 ¿Cuál de las 6 películas escogería para ver?
Gráfico 5. Resultados pregunta 5 de la encuesta
En el gráfico 5 se puede dar la idea que el sistema preferido por los usuarios, o al menos, el que les dio más confianza a la hora de elegir de entre todas las películas y éste fue el de porcentajes de aprobación (Películas E y F), algo que puede explicar el motivo por el cual hubo tanta paridad en los resultados de la Gráfica 4.
Como se mencionó en el aparte anterior, entre más información esté disponible acerca de un ítem, más son las herramientas que permitirán a los usuarios
43
determinar sus preferencias y menor será la tendencia de elección entre pares de elementos evaluados.
3.1.3.6 ¿Qué calificadores tienen más peso en las decisiones que usted tomó?
Gráfico 6. Resultado pregunta 6 de la encuesta
En el gráfico 6 se presentan los resultados sobre la importancia que se le otorga a los diferentes tipos de calificadores, en este caso los encuestados informaron que para el 44.3% es más importante la opinión de expertos mientras que para el 55.7% lo es más importante la de la audiencia.
A pesar de lo anterior, la diferencia no marca una tendencia general y podría hablarse de una paridad en la preferencia, lo cual potencia la importancia de mostrar información para cada tipo de calificador. Es este el punto en el que dos criterios de persuasión entran a competir, hay quienes prefieren tomar decisiones en base al gusto de sus pares, es decir el público, mientras que existen quienes se dejan persuadir más fácilmente por quienes tienen autoridad para emitir una calificación como lo son los expertos (Cialdini, 2001).
44
3.1.3.7 Si usted fuera una de las personas que va a calificar alguna película, ¿Cuál sistema de calificación le gustaría utilizar?
Gráfico 7. Resultados pregunta 7 de la encuesta
En el gráfico 7 se presenta la preferencia por el uso de los diferentes sistemas de calificación relacionados en las primeras 3 preguntas de elección de películas donde los resultados fueron, para el sistema de porcentajes de aprobación un 47.6% de preferencia, para el de 5 estrellas un 36.8 % y para el de TU/TD un 16.5%.
Los resultados obtenidos en el gráfico 5 coinciden con la preferencia de los usuarios por utilizar el sistema de porcentajes de aprobación, sin embargo, sobresale la situación que a pesar de que se concluyó en el análisis del gráfico 4 que a mayor información, mayores son las herramientas para la elección y mayor será la credibilidad de las calificaciones en el momento de tomar decisiones, los usuarios prefieren usar en segunda instancia el sistema de calificación de 5 estrellas a siendo éste el que trae menos información de los tres.
Así pues para dar explicación a dicha conducta es preciso relacionar aspectos diferentes a la información que presenta cada sistema de forma única, como lo son las tradiciones culturales (por ejemplo, en los periódicos usualmente las películas siempre son calificadas con un sistema de 5 estrellas, entonces éste puede ser de más fácil recordación y uso que el TU/TD), la forma de presentación
45
de los datos o la asociación de los sistemas de calificación con usos previos en otras comunidades virtuales (por ejemplo, una familiarización por haber utilizad amazon y sus sistema de calificación en el pasado, el cual es similar al de 5 estrellas).
3.1.3.8 ¿Qué presentación de resultados influye más en la toma decisiones?
Gráfico 8. Resultados pregunta 8 de la encuesta
En el gráfico 8 la representación de línea se utiliza para mostrar la amplia preferencia que se le otorga al hecho de mostrar tanto la cantidad como el porcentaje de los calificadores (54.71%) y el rechazo que se da a la situación contraria que es la de ausencia de información (como en los periódicos) correspondiente al 3.3 % algo que se verá en mayor detalle en la sección de análisis de resultados y se constituirá en un indicador de credibilidad.
Continuando con el análisis de dicho gráfico si no tenemos en cuenta la importante preferencia de que tanto cantidad como porcentaje estén presentes, vemos que existe una segunda preferencia por la presentación en forma de porcentaje, algo que coincide con la preferencia de los usuarios por el uso del sistema de calificación de porcentaje de aprobación visto en el gráfico 7.
Si bien marca una segunda tendencia, y una explicación a los resultados de las últimas dos gráficas, también se constituye en un riesgo, ya que como se vio (Allen, 2005) si no se cuenta con una escala de calificación normalizada dichos porcentajes no van a reflejar la realidad de la calidad de la publicación y pueden estar sujetos a vicios que afecten la consistencia de las evaluaciones de la comunidad virtual.
46
3.1.3.9 Suponga que usted va a dar una calificación a una película, ¿Cuál de los siguientes factores de usabilidad es el más importante para usted en el momento de utilizar el sistema de calificación?
Gráfico 9. Resultados pregunta 9 de la encuesta
En el gráfico 9 se muestran los resultados correspondientes a la importancia que dan los encuestados a unos indicadores de usabilidad iniciales (no definitivos) en el momento de utilizar un sistema de calificación.
Es de notar una amplia preferencia tanto a la vista inmediata de resultados como hacia la presentación del sistema de calificación que puede explicar el fenómeno explicado en el análisis del gráfico 7 donde se tiene la hipótesis que la presentación de las imágenes, textos e información incide en la preferencia de los usuarios.
Junto con estos, se han determinado otros indicadores de usabilidad los cuales se explicarán en mayor detalle en la sección de análisis de resultados.