Multimodale Interaktion in Augmented Reality Umgebungen am ...

KAPITEL 4.INTERAKTION DES MENSCHEN ZUR MASCHINEForm von Tastern als auch Ausgabemöglichkeiten mittels akustischer, visueller und haptischerElemente. Gerade durch das gezielte Vibrieren bietet sich diese Hardware als Grundlage fürdas kombinierte Ein- und Ausgabegerät an.4.3.2.1 ÜbersichtÄhnlich zu den bisherigen Ein- und Ausgabegeräten besteht das hier vorgestellte System auseinem Server-Client-Ansatz (vgl. Abb. 4.19). Der WII-Controller ist via Bluetooth mit demWII-Controller-Server verbunden. Dieser Server besteht aus der „WIImote LIB“ und einerSteuerung von Menü und Menülogik. Über die „WIImote LIB“ können sowohl die über denWII-Controller getätigten Eingaben ausgelesen werden als auch die Ausgabemöglichkeiten desControllers angesprochen werden. Die Logiksteuerung des Menüs übernimmt hierbei die Ver-WIIWIIControllerControllerWIIWIIControllerControllerClientClientBluetoothVerbindungUDP-NachrichtWIImoteWIImoteLIBLIBMenüMenüLogiksteuerungLogiksteuerungWII Controller ServerAbbildung 4.19: Schematischer Aufbau des WII-Controllers als Ein- und Ausgabegerätmittlungstätigkeit zwischen der „WIImote LIB“ und dem WII-Controller-Client. Der Clientstellt der Applikation Möglichkeiten bereit, sowohl die Eingaben über den Controller einzulesenals auch die Ausgabe über diesen anzusteuern. Server und Client sind hierbei über eineNetzwerkverbindung gekoppelt und kommunizieren über UDP Nachrichten.4.3.2.2 HardwareGrundlage des kombinierten Ein- und Ausgabegerätes ist der WII-Controller von Nintendo[63]. Dieser Controller hat eine Größe von etwa 3x3x15 cm. Über ein im Gerät verbautesBluetooth Interface kann der Controller mit jedem Computer, der mit einem Bluetooth Interfaceausgestattet ist, kommunizieren. Der Controller (vgl. Abb. 4.20) stellt insgesamt siebenTaster und ein Navigationskreuz (bestehend aus vier Tastern) zur Verfügung. Neben diesenenthält der Controller noch eine Kamera an der Spitze, die in der Lage ist, IR Strahlungzu detektieren, sowie Neigungssensoren, um die Lage im Raum bestimmen zu können. Beidewerden jedoch für den weiteren Verlauf nicht berücksichtigt. Als Eingabe werden hier nur dieTaster verwendet. Als Ausgabe stellt der Controller einen Lautsprecher für akustisches, vierLEDs für visuelles und ein Vibrationselement für ein haptisches Feedback zur Verfügung. Fürdas hier vorgestellte Gerät kommen nur die visuellen und haptischen Elemente zum Einsatz.Für das kombinierte Ein- und Ausgabegerät stehen also im weiteren Verlauf die Taster als60