Semantische Verarbeitung von Gebärdensprache in intelligenten hierarchischen Sprachdialogsystemen

Authors: Jens Lindemann

Abstract:

In diesem Beitrag wird das Konzept des eigenen Forschungsvorhabens im Kontext der hierarchischen kognitiven Dialogsysteme vorgestellt. Die Benutzerschnittstellen solcher Systeme sollten multimodal gestaltet werden. In diesem Zusammenhang ist es für bestimmte Szenarien sinnvoll gehörlosen Personen die Spracheingabe mittels Gebärden zu ermöglichen, welche dann vom System analysiert und interpretiert werden müssen. Die Zuordnung einer sprachlichen Äußerung zu seiner Bedeutung wird im vorgestellten Ansatz sowohl für die Lautsprache als auch für die Gebärdensprache durch Transduktoren realisiert. Als Bedeutungsträger werden in unserem System Merkmal-Werte-Relationen verwendet. Die Informationsverarbeitung oberhalb der semantischen Ebene ist in dem Modell bedeutungsgetrieben, so dass sie aus derzeitiger Sicht für alle durch das System analysierbaren multimodalen Benutzereingaben identisch erfolgen kann.