DAGA 2010 - Deutsche Gesellschaft für Akustik eV

Programm DAGA 2010 69
text at the input could be obtained synchronized audio-visual speech at
the output.
Di. 16:35 Grashof C 20 Auditorisch-visuelle Sprache
LIPPS - Eine dialogbasierte, audio-visuelle Trainingshilfe für das
Absehen zum Einsatz mit Schwerhörigen
H.-H. Bothe und H. Gebert
Technical University of Denmark
Menschen mit abnehmender Hörfähigkeit sind zunehmend auf alternative
Kommunikationskanäle angewiesen. Das Absehen der sichtbaren Artikulationsbewegungen
eines Gesprächspartners stellt dann eine Möglichkeit
dar, verbale Äusserungen zu verstehen. Das bewusste Trainieren
des Absehens kann auch als Erlernen einer visuellen Sprache betrachtet
werden. In diesem Sinne stellt das vorgestellte Projekt den Entwurf
und Aufbau eines Sprachlabors für das Absehen dar, welches dem Lehrer
eine effektive audio-visuelle Hilfe zur Ergänzung seines Unterrichts
bieten kann.
Dazu wurde ein Softwarepaket entworfen, das im Wesentlichen aus einer
3D-Gesichtsanimation mit synchronisierter Sprachvollsynthese, einer
natürlichsprachigen Dialogeinheit mit sprecherabhängigem Spracherkenner
sowie einem Lehrer-Schüler-Trainingsmodul besteht. Der
modulare Aufbau mit zentralem Eventmanager erlaubt die Kombination
verschiedener Einzelmodule.
In der hier vorgeschlagenen Version des Trainingsmoduls findet ein hierarchisch
strukturierter Aufbau Anwendung, der zunächst wichtige Einzelwörter
und kurze Phrasen darstellt, um dann über einfache gesteuerte
Dialoge zu einer relativ freien Konversation zu kommen; die vom
Lehrer vorgeschlagenen Wörter oder Äusserungen werden dabei systematisch
in die Dialogführung eingebaut. Dieses Vorgehen erscheint den
Absehschülern durch seine Interaktivität wesentlich interessanter als die
sequentielle Präsentation vorgefertigter Videofilme.
In unserem Beitrag werden die aktuelle Version der Trainingshilfe sowie
erste Ergebnisse im Einsatz mit schwerhörigen und normalhörenden
Schülern vorgestellt.
Di. 17:00 Grashof C 20 Auditorisch-visuelle Sprache
SSI/ModelUI - A Tool for the Acquisition and Annotation of Human
Generated Signals
J. Wagner, E. André, M. Kugler und D. Leberle
University of Augsburg
The modelling and simulation of human behaviour during conversations
with other humans is crucial for more natural human-computer interaction.
This requires the analysis of human generated data recorded in such
situations. Since humans express their feeling and intensions through a
large number of channels, e.g. speech, mimic or posture, these corpora
must include various types of signals. The synchronized recording and