Zum Inhalt springen
Immersive Räume

Interaktive Klanginstallation

Ein Raum mit fünf Projektionsflächen, der von sich aus nichts zeigt, bis jemand ein Geräusch macht – Live-Audioanalyse in TouchDesigner, hier von einem Perkussionisten bespielt.

Eine Installation für den immersiven Raum von Infinia, 2024 gebaut, bei der dieser Raum von sich aus nichts zu zeigen hat. Bei Stille bleibt er reglos; die Visuals gibt es genau so lange, wie Klang da ist, der sie hervorbringt.

Bei der Präsentation spielte ein Perkussionist – sein Set mitten im Raum, fünf Flächen, die ihm antworteten, nichts zwischen ihnen geprobt. Jede Quelle funktioniert genauso: eine Stimme, ein Handylautsprecher, ein Raum voller Menschen, die sich unterhalten.

Von
Özgür Kahraman – Künstler für 3D und immersive Medien
Auftraggeber
Infinia
Jahr
2024
Rolle
Interaktive Visuals · TouchDesigner
Werkzeuge
  • TouchDesigner
  • HeavyM
  • Partikelsysteme
  • GLSL

Im Raum

Klang als Steuerung

Ein Mikrofon im Raum speist über ein Audio-Interface die Workstation, und TouchDesigners eigene Audio-CHOPs zerlegen das Gehörte in Bässe, Mitten und Höhen. Diese Bänder steuern Farbe, Intensität und Seed jedes Musters, während Partikel zu ihnen hingezogen werden und Figuren bilden, die an Kymatik erinnern – optische Verwandte der Formen, die Sand auf einer schwingenden Platte zeichnet. Nichts ist vorprogrammiert: Der Raum bewegt sich nur, wenn jemand ein Geräusch macht.

Showreel: Der Perkussionist spielt, grüne und violette kymatische Muster antworten an den Wänden
Der Perkussionist von oben, die Hände auf den Congas, der Boden um ihn herum blau beleuchtet
Der Perkussionist im weißen Hemd vor einer Wand mit violettem kymatischem Muster
Der Perkussionist spielt, dahinter bewegt sich das grüne Muster auf der Wand
Hände schlagen auf eine Conga, dahinter das Muster als grüne Unschärfe
Gelbe und cyanfarbene Linienmuster an der Wand, ein weißer Lichtbogen breitet sich über den Boden aus
Von oben gesehen: der Perkussionist in der Mitte eines grünen, kaleidoskopartigen Bodens
Von oben gesehen: der Perkussionist in der Mitte eines violetten, kaleidoskopartigen Bodens
Der Schnitt von Infinia, mit Ton
Handyclip: der Perkussionist in vier Farbstimmungen, Magenta, Grün, Blau und Gold
Von oben: der Perkussionist in der Mitte des Bodens, während das Muster die Farbe wechselt

Projection Mapping

Ausgangsmuster, die der Klang verformt

Die Muster entstehen im selben Netzwerk, als Wandpanoramen und Bodenbilder im Seitenverhältnis der Installation, sodass der Raum wie eine einzige durchgehende Fläche wirkt. Jedes ist ein Ausgangszustand; das Audiosignal verformt es dann live, sodass jeder Auftritt eine andere Spur hinterlässt.

Wandpanorama: ein rotes, kaleidoskopartiges Gitter

ziehen, um sich im Raum zu drehen

Wandpanorama: ein magentafarbenes Gitter aus sich kreuzenden Diagonalen

ziehen, um sich im Raum zu drehen

Wandpanorama: ein bernsteinfarbenes Rautengitter, jede Raute in die nächste gespiegelt

ziehen, um sich im Raum zu drehen

Wandpanorama: ein rosafarbenes Gitter mit gespiegelten Figuren

ziehen, um sich im Raum zu drehen

Bodenbild: ein magentafarbenes X aus Partikeln
Bodenbild: ein feines magentafarbenes Gitter
Bodenbild: ein bernsteinfarbenes Gitter aus sich kreuzenden Diagonalen, in jeder Zelle ein Ring

Workflow

Vollständig in TouchDesigner gebaut

Audioanalyse, Partikelsysteme und Shader-Steuerung in Echtzeit, alles in TouchDesigner – ohne externe Analysebibliothek. Der Klang im Raum steuert live visuelle Parameter wie Farbe, Bewegung und Mustererzeugung, und es gibt keine Timeline: Die Arbeit dauert genau so lange wie der Auftritt.

Das TouchDesigner-Netzwerk: die Audioanalyse, die eine Kette von Operatoren speist, dahinter ein magentafarbenes kymatisches Muster

Aufbau

Zwölf Projektoren, eine Workstation

Zwölf Projektoren werden von einer einzigen Workstation mit drei GPUs angesteuert, HeavyM übernimmt Warping und Blending der Ausgänge; Mikrofon, Analyse und Rendering laufen alle auf derselben Maschine, sodass der Raum innerhalb eines Frames auf den Klang reagiert.

Projektoren
12
GPUs
3
Workstation
1
Frequenzbänder
3
Ein Perkussionist an zwei Congas, um ihn herum ein grünes kymatisches Muster, auf Wände und Boden projiziert