Multimodale Interaktion in Augmented Reality Umgebungen am ...

KAPITEL 6. MULTIMODALE INTERAKTION BEI ZWEIEXEMPLARISCHEN SPIELENuntereinander, ebenso wie die Berechnung der physikalischen Vorgänge. Weiterhin sorgt dieLogiksteuerung für die Visualisierung der Szene innerhalb der AR für den Nutzer, aber auchfür die Visualisierung der GUIs für das Programm selbst. So ist zwischen der Visualisierungfür den Spieler und den Spielleiter zu unterscheiden. Das GUI für den Spielleiter bietet dieMöglichkeiten, das Programm zu starten oder zu konfigurieren. Währenddessen stellt dieVisualisierung dem Spieler nur die reine Szene in AR zur Verfügung (vgl. Abb. 6.4).(a) „BillARd“ vor dem Anstoß(b) „BillARd“ während des SpielesAbbildung 6.4: „BillARd“ aus Sicht eines BeobachtersFür „BillARd“ wurde für die visuelle Ausgabe das in Kapitel 3.1 beschriebene System zurVisualisierung von AR verwendet. Für ein haptisches Feedback wurde der WII-Controller ausKapitel 4.3 integriert. Dieser stellt zugleich das für „BillARd“ entwickelte Menü in AR zurVerfügung und dient somit als Eingabegerät. Als zusätzliche Eingabemöglichkeit kommt derGestenerkenner aus Kapitel 4.1 zum Einsatz. Dieser dient dazu, dem Nutzer das Greifen derKugeln zu ermöglichen. Die eingebundene Kollisionserkennung aus Kapitel 5.1 ermöglicht es,reale Objekte auf dem Tisch zu platzieren. Diese realen Objekte werden dann automatischvirtuell in Echtzeit modelliert und können mit dem Spielgeschehen in Interaktion treten.Diese Vorgänge der Interaktion wirken sich auf die zugrundeliegende Physik des Spielesaus. Daher übernimmt die Logiksteuerung auch die komplette Simulation der physikalischenVorgänge. Hierzu zählen die Roll- und Stoßeigenschaften der Kugeln untereinander, mit derBande oder mit dem Queue. Ebenfalls werden hier die Kollisionen zwischen den Kugeln undden automatisch modellierten realen Gegenständen berücksichtigt.Die folgenden Kapitel beschreiben die Entwicklung bzw. Integration der einzelnen Elementeder Logiksteuerung.6.1.4 PhysikDie Simulation der Physik für „BillARd“ umfasst die Berechnung von Kollisionen von einerKugel mit dem Queue, also dem Stoßen, mit einer weiteren Kugel, mit der Bande, sowiemit dem realen Objekt, das durch die Kollisionserkennung bereits virtuell abgebildet wurde.Alle möglichen Kollisionspartner werden während des Spieles durchgehend auf eine möglicheKollision hin überprüft. Wird eine solche detektiert, wird die Simulation der Kollision gestartet.Die einzelnen Kollisionsmöglichkeiten und deren Berechnung werden nun im Folgendenvorgestellt.84