Gegenstand des Seminars ist die multimodale Sprachwahrnehmung. Einführend beschäftigen wir uns mit der Rolle von non-verbaler Kommunikation, erörtern
verschiedene Funktionen von non-verbalen Signalen und definieren den Begriff "Visuelle Prosodie". Des Weiteren werden Studien zum sogenannten McGurk-Effekt
(McGurk, McDonald, 1976) vorgestellt. Im Bereich der Künstlichen Intelligenz werden Ansätze zur Modellierung von "Talking Heads" diskutiert, ebenso wird auf "Embodied
Conversational Agents" eingegangen. Darüber hinaus lernen wir das Programm ELAN zur multimodalen Annotation kennen. |
