Y OBJETOS DE APRENDIZAJE
4. EVALUACIÓN DE OBJETOS DE APRENDIZAJE
4.8.2. Evaluación de OAs a través de sistemas de recomendación
Los sistemas de recomendaciones constituyen también una fuerte apuesta para la evaluación de OAs. La idea es recoger información para que el sistema recomiende recursos de forma automática. La reutilización automática en OAs requiere dotarlos de contenido semántico que permita la búsqueda, selección y composición eficiente de éstos.
Para ello es necesaria la incorporación de aspectos relacionados con la calidad de los OAs dentro de su descripción semántica que facilitará su gestión.
Sobre esta base, Morales, Gil & García (2007c) y Gil, Morales & García (2007) sugieren una arquitectura para la búsqueda y catalogación personalizada de OAs en repositorios distribuidos. La arquitectura del sistema se define en base a un sistema multiagente donde los agentes software se coordinan para identificar y recuperar los OAs relevantes a la petición de información suministrada por el usuario. El proceso de recomendación comienza para el usuario con la petición explícita de OAs mediante una interfaz de búsqueda. Estas palabras clave permitirán realizar la búsqueda del OA en una serie de repositorios disponibles en Internet.
Todos los OAs recuperados a través del agente recolector pasarán a ser normalizados por el agente de normalización, según una ontología propuesta por Morales, García & Barrón (2006) que define la estructura de los OAs recolectados. Es en este proceso de normalización en donde se le añadirá la calidad del OA. Una vez que los OAs han sido normalizados incluyendo además su información de calidad serán baremados de acuerdo a los metadatos del contexto del OA en su conjunto estableciendo un ranking entre todos ellos por el agente catalogador. A continuación, el agente de recomendación realizará nuevamente un reestructuración de esta catalogación incluyendo los metadatos relativos al contexto del usuario implicado. Este mecanismo generará un modelo de
relevancia de estos OAs con respecto al usuario. Esta información a través de reglas de inferencia sobre el contexto del usuario añade características de personalización en la recuperación y ordenación de los OAs mostrados al usuario peticionario.
Otro tipo de técnicas para guiar y proporcionar recomendaciones es el filtrado colaborativo (Herlocker, Konstan, Terveen & Riedl, 2004) que consiste en un sistema automático que recoge acciones de los usuarios de forma explícita (votos, respuesta a preguntas, etc.) o implícita, a través de los enlaces visitados y el tiempo dedicado a esta tarea.
En esta misma línea, Ferrán & Minguillón (2005) proponen la evaluación de OAs a través de la búsqueda y la navegación en donde la opinión implícita de un individuo sobre un OA, expresada a través de la interacción con dicho objeto, pueda almacenarse de forma estructurada y luego ser compartida con futuros usuarios con intereses similares.
La evaluación a través de la búsqueda y navegación se basa en un nuevo concepto de metadatos; los no-autoritativos (Recker & Wiley, 2001). Los metadatos autoritativos son los que proporcionan descripciones controladas y estructuradas de los OAs a través de diferentes puntos de acceso como: título, autor, palabras claves, etc. En cambio, según Friesen (2002), los no-autoritativos pueden aportar información interpretativa sobre la aplicación potencial de los recursos o incluir información descriptiva sobre las relaciones entre los recursos.
Este tipo de metadatos se pueden obtener si las acciones de los usuarios tanto en la búsqueda de contenidos como en la navegación son registradas. Para ello se deben tomar en cuenta dos elementos, el perfil del usuario y su comportamiento con los OAs. En el caso de que el perfil del usuario sea un estudiante, las recomendaciones de búsqueda tendrán que orientarse según el área temática al que pertenece la asignatura, teniendo en cuenta la navegación realizada por sus pares y profesores. Sin embargo, si el perfil de usuario es un investigador, las recomendaciones se orientarán según las búsquedas de otros investigadores o las publicaciones que éstos han realizado.
El comportamiento se ve reflejado en el tipo de navegación del usuario. Si se trata de una navegación exploratoria, las acciones de los usuarios estarán orientadas a una visión general de los recursos disponibles, en cambio si esta navegación es orientada a objetivos concretos, la acción del usuario estará destinada a buscar un recurso en concreto. Los estudiantes disponen de acceso a un repositorio interno donde se encuentran los recursos diseñados por los profesores, sin embargo, también necesitan acceder a recursos que se encuentran en repositorios externos, como por ejemplo Internet; por tanto, existe la necesidad de acceder a ellos de forma estructurada. Por esta razón, el acceso a repositorios
se debe realizar a través de la biblioteca digital como plataforma que es donde actúa el sistema de recomendación. De esta manera, mientras más usuarios acceden a los recursos aumenta la fiabilidad de las fuentes de información y evaluación porque se podrían obtener cientos o miles de datos de los usuarios sobre cada OA, lo que permitiría calcular información contrastada sobre visibilidad, satisfacción y rendimiento, información que puede ser utilizada para evaluar la calidad del OA y agregar o modificar los metadatos. La Tabla 8 presenta las acciones básicas que estos autores consideran para valorar los OAs a través de un sistema de recomendación.
Tabla 8. Acciones básicas en la interacción con los recursos de información y su valor en el sistema de recomendación (Ferrán & Minguillón, 2005).
Recursos Objetos Acciones de navegación y
Búsqueda
Valor en sistema Recomendación - Buscar documentos
físicos o analógicos (libros, etc.)
*
- Consultar un registro bibliográfico
- Mirar el resumen y la tabla de contenidos
**
Catálogo - Libros - DVDs, VHS - CDs
- Revistas en papel - Otros objetos en soporte analógico o papel
- Pedir un préstamo o una nueva adquisición
***
- Navegar
- Buscar **
Repositorio interno
- Artículos electrónicos - Leyes y jurisprudencia - Revistas electrónicas
- Bases de datos a texto completo - Webs
- Materiales didácticos en soporte web
- Otros objetos en soporte electrónico
- Descargar, imprimir, guardar búsqueda, enviar resultados por correo electrónico, etc.
- Recomendar un recurso de información electrónico
***
- Navegar
- Buscar **
Reposito- rios externos
- Contenidos exclusivos (bases de datos académicas de proveedores externos) - Webs
- Otros objetos en soporte electrónico de servidores externos
- Descargar, imprimir, guardar búsqueda, enviar resultados por correo electrónico, etc.
***