ESTADOS EMOCIONALES EN LAS CONVERSACIONES HUMANO ROBOT

5.1 ¿QUÉ ES UN TURNO?

6.15 ESTADOS EMOCIONALES EN LAS CONVERSACIONES HUMANO ROBOT

Elaborar un modelo de expresiones de actitud162_{, para los comportamientos}

explícitos e implícitos en una conversación humana, definir estados emocionales del robot durante las conversaciones. En este estudio, se discute una novedosa expresión y el modelo de comprensión de la actitud de expresión de hablar y oír durante las conversaciones. Con respecto a la aplicación de este modelo a las interacciones hombre-agente, este modelo contribuye al diseño de robots de conversación y agentes que no sólo transmiten información, sino también sentimientos o pensamientos como los seres humanos. Para leer estos sentimientos o pensamientos, estos robots y agentes, necesitan tener la capacidad de tratar comportamientos, no sólo explícitos, sino también comportamientos implícitos, como sentimientos o pensamientos, que se espera sean notados por otros. Las expresiones pueden clasificar en dos tipos: sutil implícito expresivo, comportamientos que se espera sean notados por otros y comportamientos explícitos directos que controlan intencionalmente.

Se presenta la creación de un modelo de expresividad multimodal, un agente llamado Greta, que exhibe comportamientos no verbales sincronizados con el habla. Se realizaron dos pruebas perspectivas para evaluar el modelo de expresividad. La primera prueba consistió en medir cada dimensión del modelo de expresividad que ha sido implementada, la segunda prueba es comprobar si las seis dimensiones de

162_{Yuasa, M., Mukawa, N., Kimura, K., Tokunaga, H., & Terai, H. (2010). An utterance attitude model in}

human-agent communication. In Proceedings of the 28th of the international conference extended abstracts on Human factors in computing systems - CHI EA ’10 (p. 3919). New York, New York, USA: ACM Press.[En línea].Disponible en http://doi.org/10.1145/1753846.1754079.

expresividad podían simular comportamientos realizados de diferentes formas. Los participantes reconocieron los mejores parámetros de la extensión facial y extensión temporal. Los parámetros de fluidez y potencia tuvieron menores resultados. Los parámetros de repetición y potencia fueran a menudo malinterpretados entre sí.

CONCLUSIONES

En primera instancia, se presenta un conjunto de conclusiones acerca del proceso de realización de la revisión sistemática:

● El presente trabajo de grado tuvo como objetivo, realizar una revisión sistemática sobre los modelos de toma o negociación de turnos, mediante la utilización de un protocolo que se siguió en cada una de sus etapas para establecer el estado de arte, logrando evaluar los modelos para establecer las características predominantes, ayudando a investigadores, compañías y universidades en la mejora de los modelos existentes.

● Adaptar y seguir un protocolo de revisión sistemático ayudó a la selección de artículos científicos fueran relevantes para identificar modelos de negociación de turnos, utilizados en interacciones conversacionales, porque contribuye a la mejora de la investigación.

● Realizar un asentamiento bibliográfico en el formato RAE, fue útil para resumir los artículos y extraer los hallazgos más importantes de la investigación, porque la cantidad de información era difícil de manipular y analizar.

En segunda instancia, se presentan las conclusiones relacionadas directamente con el objeto de estudio de la revisión realizada:

● Un agente debe hacer uso de un conjunto de características que le permita la toma de turnos en las conversaciones con humanos favoreciendo una interacción fluida y coordinada.

● En la comunicación cara a cara, los seres humanos comparten el mismo tiempo y espacio; y puede obtener no sólo información verbal sino también información no verbal a través del sentido visual, auditivo y táctil. Con tal información no verbal como posición, tiempo de emisión, miradas y gestos, los seres humanos pueden transmitir intenciones, emociones y expresiones. ● Con base en los resultados encontrados, se puede concluir que un agente que utiliza una determinada estrategia de toma de turno puede de hecho influir en la impresión que un usuario tiene del agente.

● La teoría es clara al argumentar que un modelo agente-adulto funciona de manera diferente que cuando se tiene un modelo agente-niño ya que tienden a romper las reglas que siguen los adultos para tomar el turno, por lo tanto,

parece que se debería utilizar un modelo diferente para las interacciones con niños.

● La proxémica puede ser información útil en los modelos culturales para analizar la toma de turno en las conversaciones, y lograr simular un entorno lo más real posible mediante rasgos culturales.

● Para modelos de toma de turnos de conversaciones multipartita, el movimiento de la cabeza puede funcionar como una señal más visible del foco de atención del hablante y la voluntad de tomar turno. En los diálogos de dos personas, el ojo puede ser suficiente para señalar la intención del compañero de tomar el turno o dar el turno, pero en los diálogos multipartita, los participantes pueden no compartir el contexto completamente y el foco de la atención que el orador necesita puede expresarse de manera más visible. ● Es importante para la toma de turnos considerar los gestos icónicos, el gesto en específico y de quién provenga, puede tener significados diferentes en el modelo de negociación de turnos.

● En un modelo se debería tener en cuenta las señales verbales y no verbales en conjunto y no por separado porque se obtienen mejores resultados en la predicción de la toma de turnos.

● La aversión de la mirada es una señal de conversación poderosa que debe ser aprovechada con el fin de crear eficaces y naturales interacciones humano – agente.

● Rasgos como la prosodia, la mirada, movimientos de cabeza, gestos, respiración, proxémica deben ser tenidos por los modelos para una eficaz predicción.

● Máquinas de estado finito y árboles de decisión son herramientas que muestran buenos resultados en comparación con otros métodos y que pueden ser implementados en la toma de turnos humano-agente.

● La información recolectada y evaluada, se pretende utilizar para mejorar los modelos existentes humano-agente.

BIBLIOGRAFÍA

A. Hoyos, “Proceso de Revisión Sistemática,” 2011. [En línea]. Disponible en

https://es.slideshare.net/GAlbertoHoyos/proceso-de-revision-sistematica.

A. Keitel and M. M. Daum, “The use of intonation for turn anticipation in observed conversations without visual signals as source of information.,” Front. Psychol., vol. 6, no. FEB, p. 108, Feb. 2015.

Adrián Moreno, “Toyota ha creado un robot compañero para adultos - Voltaico,” 2016. [En línea]. Disponible en https://voltaico.lavozdegalicia.es/2016/10/toyota- robot-companero-adultos/.

Adrián Moreno, “Toyota ha creado un robot compañero para adultos - Voltaico,” 2016. [En línea]. Dispnible en: https://voltaico.lavozdegalicia.es/2016/10/toyota- robot-companero-adultos/.

Alejandro Murillo. (2012). ¿Qué es el dispositivo Kinect? | Kinect for Developers.

Retrieved May 29, 2017. [En línea]. Disponible en

http://www.kinectfordevelopers.com/es/2012/11/06/que-es-el-dispositivo-kinect/. Alejandro Murillo. (2012). ¿Qué es el dispositivo Kinect? | Kinect for Developers.

Retrieved May 29, 2017. [En línea]. Disponible en

http://www.kinectfordevelopers.com/es/2012/11/06/que-es-el-dispositivo-kinect/. Andrist, S., Tan, X. Z., Gleicher, M., & Mutlu, B. (2014). Conversational gaze aversion for humanlike robots. In Proceedings of the 2014 ACM/IEEE international conference on Human-robot interaction. New York, New York, USA: ACM Press. [En Línea]. Disponible en http://doi.org/10.1145/2559636.2559666.

Basharin, Gely P, Langville, Amy N, Naumov, V. A. (2004). Editorial note. Linear

Algebra and Its Applications. [En línea]. Disponible

http://doi.org/10.1016/j.laa.2004.04.001.

Bavelas, J. B., & Gerwing, J. (2007). Conversational Hand Gestures and Facial Displays in Face-to-Face Dialogue. Social Communication. [En línea]. Disponible en

http://doi.org/10.4324/9780203837702.

Benward, B., & Saker, M. (2008). Music in theory and practice. McGraw-Hill. McGraw-Hill. [En línea]. Disponible en http://www.getcited.org/pub/103017394. Bergmann, K., Rieser, H., & Kopp, S. (2011). Regulating dialogue with gestures: towards an empirically grounded simulation with conversational agents. Proceedings

of the SIGDIAL 2011. [En línea]. Disponible en:

http://dl.acm.org/citation.cfm?id=2132902.

Bohus, D., & Horvitz, E. (2011). Multiparty turn taking in situated dialog: Study, lessons, and directions. Proceedings of the SIGDIAL 2011 Conference, (1974). [En línea]. Disponible en http://dl.acm.org/citation.cfm?id=2132903.

Bohus, D., Raux, A., Harris, T. K., Eskenazi, M., & Rudnicky, A. I. (2007). Olympus. In Proceedings of the Workshop on Bridging the Gap Academic and Industrial Research in Dialog Technologies.

Bono, M. (2004). What is a Multiparty Interaction? Analysis 1: Facing formation and Participation Framework Analysis 2: Schisming in Multiparty and Sign Language

Conversation. [En línea]. Disponible en

http://research.nii.ac.jp/~bono/media/poster/IAB.pdf.

Bosch, L., Oostdijk, N., & Ruiter, J. (2004). Turn-taking in social talk dialogues: Temporal, formal, and functional aspects. In 9th International Conference Speech

speech.org/archive_open/specom_04/spc4_454.html.

Briz, A. (2000a). Las unidades de la conversación. Revista Del Instituto de Lengua Y Cultura Españolas.

Briz, A. (2000b). Turno y alternancia de turno en la conversación. Revista Argentina de Lingüística.

C. I. Hovland, “Social Communication,” 1948. [en línea]. Disponible en

http://socialcommunication.truman.edu/hidden-social-dimensions/turn-taking/. Casillas, M., & Frank, M. C. (2017). The development of children’s ability to track and predict turn structure in conversation. Journal of Memory and Language. [En línea]. Disponible en http://doi.org/10.1016/j.jml.2016.06.013.

Casillas, M., & Frank, M. C. (2017). The development of children’s ability to track and predict turn structure in conversation. Journal of Memory and Language. [En línea]. Disponible en http://doi.org/10.1016/j.jml.2016.06.013.

Chao, C. (2012). Timing multimodal turn-taking for human-robot cooperation. In Proceedings of the 14th ACM international conference on Multimodal interaction - ICMI. New York, New York, USA: ACM Press. [En línea]. Disponible en

http://doi.org/10.1145/2388676.2388744.

conceptodefinicion, “¿Qué es Semantica? - Su Definición, Concepto y Significado,” 2014. [En línea]. Disponible en http://conceptodefinicion.de/semantica/.

conceptodefinicion., “¿Qué es Léxico? - Su Definición, Concepto y Significado,” 2014. [En línea]. Disponible en http://conceptodefinicion.de/lexico/.

Cowley, S. J. (1998). Of Timing, Turn-Taking, and Conversations. Journal of

Psycholinguistic Research. [En línea]. Disponible en

Definición ABC, “Definición de Genética» Concepto en Definición ABC, Lenguaje corporal,” Definición de Genética, 2017. [En Línea]. Disponible en

https://www.definicionabc.com/comunicacion/lenguaje-corporal.php.

Definición.De, “Definición de sintaxis - Qué es, Significado y Concepto,” Definicion.de©, 2008. [En línea]. Disponible en http://definicion.de/sintaxis/.

Diaz, M. (2013). La comunicación verbal - SELVV. Recuperado May 29, 2017. [En línea]. Disponible en https://selvv.com/comunicacion-verbal/.

EcuRed, “Robot,” 2017. [En líena]. Disponible en https://www.ecured.cu/Robot. englishonline, “Turn Taking / The Language of Conversation / Exploring language / Planning for my students’ needs / English Online / English - ESOL - Literacy Online website - English - ESOL - Literacy Online,” 2009. [En línea]. Disponible en

http://englishonline.tki.org.nz/English-Online/Planning-for-my-students- needs/Exploring-language/The-Language-of-Conversation/Turn-Taking.

Maat, M., Truong, K. P., & Heylen, D. (2010). How Turn-Taking Strategies Influence Users’ Impressions of an Agent. Lecture Notes in Computer Science (Including Subseries Lecture Notes in Artificial Intelligence and Lecture Notes in Bioinformatics), 6356 LNAI. [En línea]. Disponible en http://doi.org/10.1007/978-3- 642-15892-6_48.

Varela Iglesias J L, Tadeo Monge FT, Carreño Rujillo G, Doménech Colón F, Abad León A, “Real Academia Española. Conversación,” Edición del Tricentenario. 2014. [En línea]. Disponible en http://dle.rae.es/srv/fetch?id=AgW2atc.

Varela Iglesias J L, Tadeo Monge FT, Carreño Rujillo G, Doménech Colón F, Abad León A, “Real Academia Española. Diccionario Usual.Entonación,” Edición del Tricentenario. 2014. [En línea]. Disponible en http://dle.rae.es/srv/fetch?id=FilFwSN. Varela Iglesias J L, Tadeo Monge FT, Carreño Rujillo G, Doménech Colón F, Abad

León A, “Real Academia Española. Diccionario Usual.Inhalar,” Edición del

Tricentenario. [En línea]. Disponible en

http://dle.rae.es/srv/search?m=30&w=inhalar.

Fernández, R., Lucht, T., Rodríguez, K., & Schlangen, D. (2006). Interaction in task- oriented human-human dialogue: The effects of different turn-taking policies. In 2006

IEEE ACL Spoken Language Technology Workshop, SLT 2006. [En línea].

Disponible en. http://doi.org/10.1109/SLT.2006.326791

Fernández, R., Lucht, T., Rodríguez, K., & Schlangen, D. (2006). Interaction in task- oriented human-human dialogue: The effects of different turn-taking policies. In 2006

IEEE ACL Spoken Language Technology Workshop, SLT 2006, Proceedings. [En

línea]. Disponible en http://doi.org/10.1109/SLT.2006.326791.

Gabriel D, “Definición de Orador» Concepto en Definición ABC,” Definición ABC,

2008. [En línea]. Disponible en

https://www.definicionabc.com/comunicacion/orador.php

Garrod, S., & Pickering, M. J. (2015). The use of content and timing to predict turn transitions. Frontiers in Psychology, 6(JUN). [En línea]. Disponible en

http://doi.org/10.3389/fpsyg.2015.00751.

Gatica, J. (2014). Lo icónico se relaciona con imágenes (representación gráfica de jaime gatica en Prezi. Retrieved May 23. [En línea]. Disponible en

https://prezi.com/sqmvcjaitt1v/lo-iconico-se-relaciona-con-imagenes- representacion-grafic/.

Ghilzai, S. A. (2015). Conversational Analysis of Turn taking Behavior and Gender Differences in Multimodal Conversation Shazia Akbar Ghilzai December 2015. Perspectives in Language, Linguistics and Media.

Griol, D., Molina, J. M., Callejas, Z., & López-Cózar, R. (2011). La plataforma EDUCAGENT: Agentes Conversacionales Inteligentes y Entornos Virtuales aplicados a la Docencia. Informática Educativa Comunicaciones. [En línea]. Disponible en http://hdl.handle.net/10016/18278.

Guerri, M. (2017). La comunicación no verbal, el arte de expresarse sin hablar.

Recuperado May 29, 2017. [En línea]. Disponible en

https://www.psicoactiva.com/blog/la-comunicacion-no-verbal-el-arte-de- expresarse-sin-hablar/.

Hayashi, M. (2012). Turn Allocation and Turn Sharing. In The Handbook of Conversation Analysis. Chichester, UK: John Wiley & Sons, Ltd. [En línea]. Disponible en http://doi.org/10.1002/9781118325001.ch9.

Heldner, M., & Edlund, J. (2010). Pauses, gaps and overlaps in conversations.

Journal of Phonetics. [En línea]. Disponible en

http://doi.org/10.1016/j.wocn.2010.08.002

Heylen, D. (2006). Head gestures, gaze and the principles of conversational structure. International Journal of Humanoid Robotics. [En línea]. Disponible en

http://doi.org/10.1142/S0219843606000746.

Heylen, D. (2006). Head gestures, gaze and the principles of conversational structure. International Journal of Humanoid Robotics, 3(3). [En línea]. Disponible en http://doi.org/10.1142/S0219843606000746.

Hirvenkari, L., Ruusuvuori, J., Saarinen, V. M., Kivioja, M., Peräkylä, A., & Hari, R. (2013). Influence of Turn-Taking in a Two-Person Conversation on the Gaze of a

Viewer. PLoS ONE, 8(8). [En línea]. Disponible en

http://doi.org/10.1371/journal.pone.0071569.

Holler, J., Kendrick, K. H., Casillas, M., & Levinson, S. C. (2015a). Editorial: Turn- Taking in Human Communicative Interaction. Frontiers in Psychology, 6(DEC). [En línea]. Disponible en http://doi.org/10.3389/fpsyg.2015.01919.

Ishii, R., Otsuka, K., Kumano, S., & Yamato, J. (2016). Prediction of Who Will Be the Next Speaker and When Using Gaze Behavior in Multiparty Meetings. ACM Transactions on Interactive Intelligent Systems. [En línea]. Disponible en

http://doi.org/10.1145/2757284.

J. Perez Porto and A. Gardey, “Definición de oyente - Qué es, Significado y Concepto,” 2008. [en línea]. Disponible en http://definicion.de/oyente/.

J. Terra, “Technology / Culture / Design / Experience: ID FMP: Conversation Turn-

Taking Model,” 2009. [En línea]. Disponible en

http://julioterrany.blogspot.com.co/2009/03/id-fmp-conversation-turn-taking- model.html.

Jan, D., Herrera, D., Martinovski, B., Novick, D., & Traum, D. (2007). A Computational Model of Culture-Specific Conversational Behavior. In Intelligent Virtual Agents. Berlin, Heidelberg: Springer Berlin Heidelberg. [En línea]. Disponible en http://doi.org/10.1007/978-3-540-74997-4_5

Jokinen, K. (2011). Turn taking, utterance density, and gaze patterns as cues to conversational activity. In Proceedings of ICMI 2011 Workshop Multimodal Corpora for Machine Learning: Taking Stock and Road mapping the Future. [En línea]. Disponible en http://www.thesect.se/nomco/pubs/Jokinen - Turn taking, Utterance Density.pdf.

Jokinen, K., Harada, K., Nishida, M., & Yamamoto, S. (2010). Turn-alignment using eye-gaze and speech in conversational interaction. Interspeech-2010, (September). Keitel, A., & Daum, M. M. (2015). The use of intonation for turn anticipation in observed conversations without visual signals as source of information. Frontiers in

Psychology, 6(FEB). [En línea]. Disponible en

Khoddamy Pour, F., & Yazd, A. L. (2015). Turn Taking in Conversation Analysis. International Journal of Educational Investigations. [En línea]. Disponible en

Www.ijeionline.com.

Khoddamy Pour, F., & Yazd, A. L. (2015). Turn Taking in Conversation Analysis. International Journal of Educational Investigations. [En línea]. Disponible en

Www.ijeionline.com.

Khoddamy Pour, F., & Yazd, A. L. (2015). Turn Taking in Conversation Analysis. International Journal of Educational Investigations. [En línea]. Disponible en

www.ijeionline.com, 2(6).

Kousidis, S., Schlangen, D., & Skopeteas, S. (2013). A cross-linguistic study on turn- taking and temporal alignment in verbal interaction. In Proceedings of the Annual

Conference of the International Speech Communication Association,

INTERSPEECH.

L. D. R. Díaz, “RAE - Resumen Analítico Especializado,” 2014. [En línea]. Disponible en http://competenciascomunicativas2033.blogspot.com.co/2014/06/rae-resumen- analitico-especializado.html.

Lala, D., Milhorat, P., Inoue, K., Zhao, T., & Kawahara, T. (2016). Multimodal interaction with the autonomous Android ERICA. In Proceedings of the 18th ACM International Conference on Multimodal Interaction - ICMI 2016. New York, New

York, USA: ACM Press. [En línea]. Disponible en

http://doi.org/10.1145/2993148.2998528.

Leßmann, N., Kranstedt, A., & Wachsmuth, I. (2004). Towards a cognitively motivated processing of turn-taking signals for the embodied conversational agent Max. In Proceedings Workshop W12. [En línea]. Disponible en http://perso.telecom- paristech.fr/~pelachau/AAMAS04/FinalPaper/turnTaking.pdf.

Levitan, R., Beňuš, Š., Gravano, A., & Hirschberg, J. (2015). Entrainment and Turn- Taking in Human-Human Dialogue. In AAAI Spring Symposium on Turn-taking and Coordination in Human- Machine Interaction. [En línea]. Disponible en

https://pdfs.semanticscholar.org/af4d/9048f781c3315bd7491e20aa366c051a9f77.p df.

Magyari, L., & de Ruiter, J. P. (2012). Prediction of Turn-Ends Based on Anticipation of Upcoming Words. Frontiers in Psychology. [En línea]. Disponible en

http://doi.org/10.3389/fpsyg.2012.00376.

Magyari, L., & de Ruiter, J. P. (2012). Prediction of Turn-Ends Based on Anticipation of Upcoming Words. Frontiers in Psychology, 3(OCT). [En línea]. Disponible en

http://doi.org/10.3389/fpsyg.2012.00376.

Martínez, L. (2014). ¿Qué es proxemica? Muy Interesante. [En línea]. Disponible en

http://www.muyinteresante.es/cultura/arte-cultura/articulo/ique-es-la-proxemica. McCleary, L. E., & Leite, T. de A. (2013). Turn-taking in Brazilian Sign Language: Evidence from overlap. Journal of Interactional Research in Communication Disorders. [En línea]. Disponible en http://doi.org/10.1558/jircd.v4i1.123.

medciclopedia. (2008). comunicación interpersonal diádica | Diccionario Médico.

Retrieved May 29, 2017. [en línea]. Disponible en

https://diccionario.medciclopedia.com/c/comunicacion-interpersonal-diadica/.

Morency, L.-P., Christoudias, C. M., & Darrell, T. (2006). Recognizing gaze aversion gestures in embodied conversational discourse. Proceedings of the 8th International Conference on Multimodal Interfaces – ICMI. [En Línea]. Disponible en

http://doi.org/10.1145/1180995.1181051.

Morristown, NJ, USA: Association for Computational Linguistics. [En línea]. Disponible en http://doi.org/10.3115/1556328.1556333.

N. Leßmann, A. Kranstedt, and I. Wachsmuth, “Towards a cognitively motivated processing of turn-taking signals for the embodied conversational agent Max,” in

Proceedings Workshop W12, 2004.

Nordquist, R. (2017). Back-Channel Signal Definition and Examples. Retrieved May 29, 2017. [En línea]. Disponible en https://www.thoughtco.com/back-channel-signal- communication-1689153

Novick, D. (2005). Models of gaze in multi-party discourse. Proceedings of Computer

Human Interface (CHI. [En línea]. Disponible en

http://www.cs.utep.edu/novick/papers/gaze.chi05.pdf.

Novick, D., & Gris, I. (2013). Grounding and Turn-Taking in Multimodal Multiparty Conversation. In Lecture Notes in Computer Science (including subseries Lecture Notes in Artificial Intelligence and Lecture Notes in Bioinformatics),Vol. 8007 LNCS.[En línea].Disponible en http://doi.org/10.1007/978-3-642-39330-3_11. Novick, D., & Gris, I. (2013). Grounding and Turn-Taking in Multimodal Multiparty Conversation. In Lecture Notes in Computer Science (including subseries Lecture Notes in Artificial Intelligence and Lecture Notes in Bioinformatics) (Vol. 8007). [En línea]. Disponible en http://doi.org/10.1007/978-3-642-39330-3_11.

Oertel, C., Włodarczak, M., Edlund, J., Wagner, P., & Gustafson, J. (2012). Gaze patterns in turn-taking. In Proceedings of Interspeech 2012.

Ovocomunicacionesoficia. (2015). Los gestos icónicos o no deícticos... - Comunicación NO Verbal. Retrieved May 29, 2017. [En línea]. Disponible en

https://www.facebook.com/ovocomunicacionesoficial/posts/912944305466373. Pelachaud, C. (2005). Multimodal expressive embodied conversational agents. In

Proceedings of the 13th annual ACM international conference on Multimedia - MULTIMEDIA. New York, New York, USA: ACM Press. [En línea]. Disponible en

http://doi.org/10.1145/1101149.1101301.

Perez-Marin Universidad Rey Juan Carlos, D. (2011). Conversational Agents and Natural Language Interaction: Techniques and Effective Practices. [En línea].

In document Revisión sistemática de modelos de negociación de turnos para interacciones conversacionales (página 82-103)