Sonifizierung virtueller Körper über gestengesteuerte Interaktion innerhalb eines Surround-Systems

Das Projekt verbindet grundlegende Elemente der Gestengesteuerung mit der Sonifizierung virtueller Objekte. Durch diese Verknüpfung wird es ermöglicht, Blinden und stark sehgeschädigten Menschen virtuelle Objekte durch Bewegungen ihrer Hände im Raum erlebbar zu machen. Dazu werden über 3D-Sensoren (Kinect) die Bewegungen der Hände erfasst, ausgewertet und in Relation zu im System vorgehaltenen Geometrien gestellt. Durch die Änderung spezifischer akustischer Merkmale können die virtuellen Objekte im Raum "ertastet" und erlebt werden.