Semantisches Parsing mit Frames für robuste multimodale Mensch-Maschine Kommunikation

Eine wichtige Anforderung an mobile Roboter-Assistenten in Büro- oder Wohnumgebung ist die Unterstützung natürlicher Interaktion durch Sprache und Gestik. In diesem Kontext stellt dieser Artikel eine Sprachverstehenskomponente vor, die die Besonderheiten situierter Dialoge in der Mensch-Roboter Kommunikation berücksichtigt. Der Verstehensprozess basiert auf einem Frame-Konzept, das auf den Bereich der Mensch-Roboter Interaktion adaptiert wurde. Dieses Konzept unterstützt die speziellen Eigenschaften der Spontansprache und die kombinierte Verwendung von Sprache und Gestik. Für die Verarbeitung der sprachlichen ßerung ist die Nutzung weiterer Informationsquellen als Kontextwissen möglich, wie z.B. Anfragen vom Dialogmanager an den Benutzer.

An important requirement for mobile robot assistants in office or home environment is to support natural interaction capabilities such as speech and gesture. Within this context this paper presents a speech understanding component for situated human-robot communication. The understanding process is based on a frame concept, adapted to the domain of human-robot interaction. The concept supports the specific characteristics of spontaneous speech and the use of speech and gesture in combination. For the understanding of utterances further information sources can possible to be integrated as contextual knowledge like e.g., questions from the Dialogmanager to the user.