Konzert in Winterthur

Bei der Gestaltung dieses Konzerts wollte ich auf den Rückmeldungen des letzten aufbauen, aber auch die Erfahrungen durch persönliche Kontakte zu Gehörlosen nutzen um weitere Visualisierungsstile auszuprobieren. Mich interessierte wie man einen direkten Bezug der Visuals zur Musikübersetzung in Gebärdensprache aufbauen könnte und in wiefern sich die oftmals assoziative Erzählweise der GS in Musikvisualisierungen verpacken lässt.
Da der Aufbau und Ablauf des Konzerts dieses mal weit aus komplexer erschien als beim ersten mal, suchte ich einen Assistenten und erhielt Tatkräftige Unterstützung von einem Studienkollegen (Benjamin Burger).

Ein grosser Teil der Vorbereitungen in den letzten Wochen, war die Auseinandersetzung mit den Liedern die wir spielen, übersetzen und visualisieren werden. Alle Texte wurden von den Dolmetscherinnen Lilly und Susanne mit der Glossentechnik in GS übersetzt. Beide trafen sich regelmässig um die Musikübersetzung auch zusammen mit Marzia als Zuschauerin zu üben. Ich fragte die beiden ob ich neben den Texten mit Glossen vielleicht auch eine Art Vorschauvideo der Übersetzung erhalten könnte. Nach ihrem nächsten Übungstermin, erhielt ich gleich 10 von 12 Liedern als Video mit Musikübersetzung in GS. Mit diesen Videos konnte ich die verschiedenen Visualisierungen für die einzelnen Lieder ebenfalls im Vorhinein üben.

Visuals

Für mein zweites Konzert wollte ich folgende Visualisierungsstile verwenden:

1. Musikvisualisierungen die sich an die GS anlehnen
Ich entschied mich den Song Weatherman für diesen Stil zu verwenden, da die darin enthaltenen Gebärden (BeispielSonne, Regen, Regenbogen) sehr ausdrucksstark und einfach zu verstehen sind. Ich wollte mit reduzierten Formen im Video die Formen der GS durch die Dolmetscherin untermalen um ein verstärktes visuelles Erlebnis der Gebärden zu erzeugen.
Refrain:

[...]|
I make the sun and rain and the colorful rainbow
[...]
Glossen:

[...]
ICH MACHEN SONNE REGEN REGENBOGEN
[...]



2. Rhythmus Visualisierungen
Ausgehend von den animierten geometrischen Formen, wollte ich dieses mal versuchen mich weiter zu reduzieren und nur mit dem Kreis als Rhythmuselement zu Arbeiten. Um den Kreis auch ohne die Soundanalyse bearbeiten zu können, habe ich verschiedene Kreis-zoom Animationen entworfen die ich auf Knopfdruck abrufen konnte, so konnte ich einfache Rhythmen live über das drücken entsprechender Tasten auf meinem Midi Kontrollgerät, nachbauen.

Hier ein Beispiel eines simplen Rhythmus mit zwei Takten (Zeitebene von links nach rechts)

3. Live Kameras
Beim letzten Konzert richtete ich eine Kamera auf den Schlagzeuger, eine auf den Gitarristen und eine auf den Keyboarder. Da das Keyboard dieses mal nur in einem Lied verwendet wird und diese Perspektive letztes mal keine nennenswerten Reaktionen beim Publikum aufzeigte, wollte ich dieses mal andere Perspektiven versuchen. Die Kamera über dem Schlagzeuger funktionierte beim ersten Konzert auch nicht, weil die Lichtverhältnisse zu schlecht war und die Kamera zudem einen Defekt beim übertragen des Bildes aufwies. Doch die Perspektive erschien mir vielversprechend, darum installierte ich eine Kamera vier Meter über dem Schlagzeuger um eine komplette Draufsicht des Musikers mit seinem Instrument auf die Leinwand projizieren zu können. Eine zweite Kamera installierte ich auf meinem Mischpult vor der Bühne und bat Beni sie zu steuern. Ich wollte mit dieser Kamera jeweils die dominierenden Instrumente hervorheben und Beni sollte auf meine Anweisung während dem Konzert den Fokus der Kamera auf ein anderes Instrument legen.

4. Assoziative Videos & Grafiken
Motiviert durch meine Erfahrungen mit assoziativen beschriebenen Inhalten in der Gebärdensprache wollte ich versuchen, assoziative Videos zum Inhalt der Musik zu entwerfen. Wiederum entschied ich mich für ein zunächst einfaches Beispiel und wählte Rauch & Feuer für den Song „Smoke on the Water (Fire in the sky)“, da sich auch die Gebärden hierfür gut eignen.
Refrain:

Smoke on the water

the fire in the sky

Smoke on the water

but burning down

Glossen:

RAUCH (ÜBER) WASSER (SEE)

FEUER (IM) HIMMEL

RAUCH (ÜBER) WASSER (SEE)

ALLES FEUER FEUER BRENNEN AB

Lichtsetup

Fidi, der an dem Abend das Licht steuerte, kam ein wenig früher und ich gab ihm eine kleine Einführung in das Lichtpult und den Ablauf der einzelnen Lieder. Es waren im Grunde nur 3 Grundfarben, mit denen er spielen soll. Um vergleichbare Aussagen über das Licht nach dem Konzert zu sammeln, habe ich bewusst nur bei drei Liedern wechselnde Lichteinstellungen festgelegt. Bei allen anderen Liedern war es jeweils nur eine Farbe.

Konzert

Bereits vor dem Konzert begrüssten mich Brigitte Schöckle und Rolf Perrollaz. Beide blieben während dem Konzert neben meinem Mischpult stehen und gaben mir immer wieder hilfreiche Ratschläge bezüglich der Animation und Positionierung der Grafiken und Videos.

Während dem spielen befand ich mich in einen ähnlichen Zustand wie in Lausanne beim ersten Konzert, ich fokussierte mich voll und ganz auf die Musik, die Dolmetscherinnen und die Storyboards die ich für die Lieder entwickelt hatte. Teils hatte ich die Lieder oft genug geübt und wusste wann, welcher Instrumentalteil oder welche Gebärden kommen aber teils habe ich mich auch am live Spiel der Band mit der Dolmetscherin orientiert. Beni konnte mit dem der Kamera Schwenkstativ schnell reagieren und hat nach zwei oder drei Songs schon selbst den guten Fokus auf die jeweils dominierenden Instrumente gelegt, ohne dass er ständig Anweisungen von mir brauchte.
Ich merkte immer wieder, dass es mir schwer viel den Rhythmus synchron wieder zu geben.
Über die Soundanalyse war die Verzögerung der Rhytmus Visualisierung wegen den langen Videokabeln zu gross und wenn ich den Rhythmus versuchte manuell (per Tastendruck) zu animieren musste ich ebenfalls die Verzögerung des langen Videokabels ausgleichen in dem ich den Kreis jeweils einen halben Takt vor dem eigentlichen Beat springen lies. Das gelang mir nur sehr selten und zum Ende des Konzerts nutzte ich ich den Kreis als Rhythmus Element eher weniger.
Ich spielte mehr und mehr mit den Live Kameras und einer Kombination aus Schlagzeuger und einem zweiten Bild der Dolmetscherin auf dem Screen. Ein freudiges Kopfnicken meiner Berater Rolf und Brigitte bestätigte für mich diese Herangehensweise.

Das letzte Lied in unserem Set „Smoke on the Water“ war meiner Meinung nach ganz klar das Highlight des Konzerts. Passend zur Musik und zu den Gebärden der Dolmetscherin lies ich entweder Rauch auf der Leinwand Richtung Boden fallen oder Flammen über der Band Richtung Decke steigen. Erst während dem live mischen kam mir die Idee den Effekt „Luma Key“ auf dem Videomischer zu verwenden.

Dieser erlaubt es den Übergang zwischen zwei Videos mit einem Filter zu überblenden der die dunklen Bereiche des ersten Videos langsam durchsichtig werden lässt, bis man das zweite Video dahinter erkennt. Auf diese Weise sieht man während dem Übergang zwischen den zwei Videos teilweise beide auf einmal. Dies liess die Animation in dem Moment so aussehen, als ob die Dolmetscherin sich zuerst mit den Gebärden durch den Rauch arbeitet. Anschliessend verdeutlichen die Flammen auf der Leinwand die Gebärde für Feuer und spiegeln damit ein stimmiges Gesamtbild des Inhalts wieder, wobei ich die Animationen ebenfalls im Rhythmus der Musik steuern konnte.

Zudem hat Fidi am Licht sehr gut reagiert und die Farben auf der Bühne im Refrain blau (smoke on the...) und rot (fire in the...) aufleuchten lassen. Als der Sänger und die Dolmetscherin das begeisterte Publikum durch die Mitte der Halle in zwei Gruppen teilte und sie dazu brachte jeweils „Smoke on the Water“ (linke Bühnenseite) und „Fire in the Sky“ (rechte Bühnenseite) zu Gebärden, war für mich der Höhepunkt des Konzerts erreicht.

Publikums Reaktionen
Nach dem Konzert haben Marzia und Gaby sowie Emanuel und ich mit jeweils einer Kamera das Publikum nach ihrem gesamt Eindruck vom Konzert gefragt. Mich hat vor allem interessiert, woran sie sich am eindrücklichsten erinnerten.