Modelos expresivos de generación de comportamientos conversacionales para la interacción avanzada en interfaces de usuario multimodales

Título original:

Expressive Conversational-Behavior Generation Models for Advanced Interaction within Multimodal User Interfaces

Contenido del libro:

El objetivo del libro es representar un algoritmo flexible y eficiente y un novedoso sistema utilizado para la planificación, generación y realización del comportamiento conversacional (comportamiento co-verbal). Dicho comportamiento se describe mejor como un conjunto de partes del cuerpo en movimiento, que son significativas.

En términos de prosodia, está sincronizado con el discurso que lo acompaña. El movimiento y las formas generadas como comportamiento coverbal representan un vínculo contextual entre un repertorio de habilidades motoras independientes (formas, movimientos y poses que el agente conversacional puede reproducir y ejecutar) y la intención/significado de las secuencias habladas (contexto). La intención/significado real del contenido hablado se identifica a través de marcadores lingüísticos dependientes del idioma y de la prosodia.

Las bases de datos de conocimiento utilizadas para determinar la intención/sentido de un texto se basan en el análisis lingüístico y la clasificación del texto en clases y subclases semióticas conseguidas mediante la anotación de corpus multimodales basados en el esquema de anotación EVA propuesto. El esquema permite capturar características tanto a nivel funcional (dependiente del contexto) como descriptivo (independiente del contexto).

El nivel funcional captura características de alto nivel que describen la correlación entre el habla y el comportamiento coverbal, mientras que el nivel descriptivo nos permite capturar y definir poses y formas corporales independientemente del contenido verbal y en alta resolución. El esquema de anotación, por tanto, no sólo interrelaciona el habla y el gesto a nivel semiótico, sino que también sirve de base para la creación de un repertorio de movimientos y formas independiente del contexto.

El proceso de generación del comportamiento coverbal se divide, en este libro, en dos fases. La primera fase trata de