Interfaz para la especificación de los signos: LSESpeak

El diseño de esta interfaz visual es el resultado de un largo proceso de diseño organizado en tres etapas. En la primera de ellas, un grupo de expertos se reunió para describir las herramientas necesarias y las diferentes alternativas para el diseño de la interfaz. Este grupo estaba formado por dos expertos en LSE sordos, un lingüista (una persona experta en español conocedora también de la LSE) y un desarrollador de software (que desconoce la LSE). En la segunda etapa, se implementaron las distintas alternativas para la interfaz y se evaluaron con cinco usuarios finales (personas sordas). Cada usuario probó todas las alternativas de diseño generando 15 frases en LSE con ayuda de la interfaz. Por último, en una última etapa, se realizó una reunión con el grupo de expertos y los cinco usuarios y se pidió a los usuarios que indicaran sus preferencias, realizando finalmente un análisis detallado y una propuesta final para la interfaz.

En la Figura 3.3-7 pueden verse las principales utilidades incluidas en la interfaz, que se denomina LSESpeak.

Figura 3.3-7. Intefaz LSESpeak

En esta interfaz, si se selecciona una letra (al hacer clic en un botón de la letra) aparece una lista de signos que comienzan con esta letra en orden alfabético (estos botones se han incluido considerando la posibilidad de utilizar una pantalla táctil para el uso del sistema en lugar del teclado del ordenador). Si se ha seleccionado un signo de la

61

lista (por ejemplo, YO en la Figura 3.3-7), el agente animado (en la esquina superior izquierda) representa el signo para que la persona sorda pueda verificar que es el signo que quiere. Para añadir este signo a la secuencia de signos (la ventana SIGNOS, bajo el avatar en la Figura 3.3-7), es necesario hacer doble clic en el signo. El agente animado (VGuido en este caso) se ha incorporado en la interfaz como un control ActiveX.

En cualquier momento se pueden realizar otras acciones: representar la secuencia de signos actual (botón ), eliminar el último signo introducido en la secuencia (botón ) o eliminar la secuencia entera (botón ). Cada vez que la secuencia de signos se modifica, el modulo de traducción se ejecuta y se muestra la secuencia de palabras resultado de la traducción en la ventana PALABRAS. El botón ejecuta el conversor texto-habla y convierte a habla la secuencia de palabras, especificada en la ventana PALABRAS. Cuando el sistema está generando habla, este botón se deshabilita.

Con el botón DELETREO, el sistema se configura en modo “deletreo”. En este modo, los botones correspondientes a las letras tienen un comportamiento distinto: se utilizan para ir escribiendo un signo en la ventana SIGNOS letra a letra. Esta utilidad es interesante a la hora de especificar nombres propios. Cuando el agente animado tiene que representar un nuevo signo, primero comprueba si el signo está en un fichero de texto que contiene su descripción. De no ser así, el agente signa letra a letra el signo. Para generar varios signos mediante deletreo es necesario presionar el botón ESPACIO para separar signos consecutivos. También es posible, de la misma manera, especificar números utilizando los botones con números y el botón “punto” para los decimales.

Una herramienta muy útil que se ha incorporado en la interfaz es la predicción de los siguientes signos: propuesta del siguiente signo a seleccionar en función de los que ya están seleccionados hasta el momento. Cuando hay una secuencia de signos parcial y el usuario mueve el ratón sobre la ventana SIGNOS, la pantalla del sistema despliega un menú proponiendo varios candidatos como próximo signo (Figura 3.3-8). Estos candidatos se han seleccionado en base al modelo de lenguaje entrenado a partir de las frases en LSE del corpus paralelo. El sistema propone los cuatro signos con la mayor probabilidad de ser seleccionados dada la secuencia de signos parcial introducida. Si el usuario hace clic en alguna de las opciones, el signo se incorpora a la secuencia.

62

Para facilitar la introducción de una fecha o una hora, la interfaz ofrece la posibilidad de especificar la fecha en un calendario y la hora en un reloj (Figura 3.3-9). Cuando se ha especificado la fecha o la hora, es necesario pulsar el y/o para incorporar los signos correspondientes en la secuencia de signos.

Figura 3.3-9. Ejemplo de especificación de fecha y hora en LSE

Finalmente, la interfaz visual incorpora una lista de secuencias de signos frecuentes (fórmulas de cortesía, saludos, etc.). Cuando se selecciona una de ellas, la secuencia de signos entera se reemplaza por la seleccionada, y las ventanas SIGNOS y PALABRAS se actualizan (Figura 3.3-10).

Figura 3.3-10. Ejemplo de selección de frase frecuente en LSE: “BUENOS DÍAS”

La lista de frases en LSE más frecuentes puede ampliarse fácilmente. Para ello, la interfaz visual tiene una utilidad que permite generar automáticamente el fichero gif necesario para añadir una nueva frase frecuente. El botón genera un fichero gif compilando los principales frames de la representación que hace el agente animado de la secuencia de signos especificada en la ventana SIGNOS.

También se puede especificar una frase en lenguaje SMS en la ventana de edición “SMS”.

63

En la Figura 3.3-12 pueden verse algunos ejemplos de frases en LSE, lenguaje SMS y su traducción al español.

Figura 3.3-12. Ejemplos de frases en LSE, lenguaje SMS y su traducción al español.

Por último, la Figura 3.3-13 muestra los principales controles para ejecutar la conversión texto-habla. El primer botón permite seleccionar el género del habla (masculino o femenino). Los siguientes cinco botones permiten seleccionar la emoción: felicidad, tristeza, enfado, sorpresa o miedo. Bajo estos botones hay una barra de control para seleccionar la intensidad de la emoción (0% sin emoción, 100% la máxima emoción).

Figura 3.3-13. Controles visuales para la conversión texto-habla emocional

Para adaptar la interfaz a un nuevo dominio de aplicación, es necesario editar los nuevos signos para actualizar la lista de glosas (signos) considerados en la búsqueda. Cuando un usuario sordo especifica un cierto signo, el agente animado lo representa con el fin de permitir al usuario comprobar que la glosa seleccionada es la adecuada. Para añadir un nuevo signo a la interfaz, el sistema tiene que tener un nuevo archivo en una ruta específica, nombrada con el nombre del signo: por ejemplo, COCHE.txt. Este archivo contiene la descripción del signo, necesaria para que el agente animado lo represente. Esta descripción se puede generar utilizando un editor de signos, que se describe en el capítulo 4.

La generación de los signos es la tarea más costosa, ya que cada archivo que contiene la descripción del signo debe generarse manualmente. Por ejemplo, para la generación de 715 signos (los signos generados para los dominios de aplicación que se abordan), fue necesario una persona trabajando dos meses. La ventaja es que, una vez el signo se ha generado, puede ser reutilizado en cualquier dominio. Por otra parte, el tiempo y los recursos para la generación de un signo son menores que si se grabara un vídeo para cada signo. Puede consultarse más información sobre el editor de signos en el apartado 4.5.

LSE SMS Español

YO DNI RENOVAR DOCUMENTO NECESITAR CUÁL?

Q ncsito xa rnovar dni? ¿qué necesito para renovar el DNI? YO CARNET CONDUCIR

RENOVAR QUERER DÓNDE?

64

3.3.2.2

Traducción automática entre lenguas

El módulo de traducción entre lenguas de este sistema de traducción es el mismo que el comentado en el apartado 3.3.1.2, siendo ahora la lengua de origen la LSE y la lengua destino el español.