Eine mobile Interaktionsplattform für multimodale Interaktion

Authors: Giancarlo Boi, Klaus Kasper, Lubos Krejsa, Kerstin Reichel, Herbert Reininger, Bernd Schindler

Abstract:

Es wird eine mobile Interaktionsplattform für multimodale Dialoge beschrieben. Dies ist eine Softwareumgebung, die auf einem mobilen Endgerät vom Typ Pocket PC die gleichzeitige Kommunikation per Sprache und Stift/Grafik mit einer Anwendung ermöglicht. Wesentlicher Aspekt der Lösung ist eine vollständige Integration sowohl von Dialogsteuerung als auch von Spracheingabe und Sprach/Audioausgabe. Zur Steuerung des Dialogablaufs wurde eine einfache Dialogbeschreibungssprache definiert, deren Tags während der Dialogausführung interpretiert werden. Eine einfache Anbindung von Applikationsteilen wird durch Kapselung der Kommunikationsmodalität erreicht.