Lebenslauf / Ausbildung an der Uni / Seminararbeiten / Modality Integration: Speech and Gesture

Modality Integration: Speech and Gesture

3.1.1. Getrennte Steuerung durch Sprache und Gestik

Fig. 3.1: Getrennte Steuerung durch Sprache und Gestik: Sowohl Sprach- als auch Gestenerkennung kann zur Steuerung des Kommandoempfängers verwendet werden. Sprach- und Gestenerkennung werden getrennt voneinander interpretiert.

Die getrennte Steuerung (schematische Darstellung Bild 3.1) entspricht einer Eingabe durch Sprache und autonome Gesten. Die Steuerung erfolgt also mittels emblematischen Gesten, die als autonome Kommandos interpretiert werden können. Auch hier kann man mittels Sprache und Gestik die Steuerung vornehmen indem man z.B. mittels Gestik ein Objekt auswählt und das auszuführende Kommando per Sprache aktiviert.

Das Problem bei dieser Möglichkeit der Auswertung ist, dass es nicht ganz der natürlichen menschlichen Kommunikation entspricht. Bei zwischenmenschlicher Kommunikation werden Gesten meist sprachbegleitend eingesetzt und sollen das gesprochene Wort genauer spezifizieren bzw. illustrieren. In den seltensten Fällen wird Gestik als autonome Kommunikationsform verwendet (Sieht man von der Taubstummensprache oder von Zeichensprache in lauten Umgebungen ab).