360° Opera
by Jan Schmidt-Garre, January 2016
(zur deutschen Fassung)
360°
The keen interest in virtual reality following Facebook’s billion dollar investment in VR glasses developer Oculus and which more recently dominated the Sundance Film Festival and the Mobile World Congress in Barcelona, also prompted greater curiosity in the medium behind the technology – the 360° film. The glasses are fed with these films and supplemented by images on the upper and lower edges allowing the viewer to submerge himself in a borderless spherical world. Because this medium is still very young, neither hardware developers nor producers are able to fully foresee the kind of experience this will produce. To date it has been games, pornographic films and documentary formats – immersive journalism as in the short film Clouds over Sidra – that have occupied the foreground. But the 360° film also offers fascinating possibilities for theater, opera and dance.
The Camera as Stowaway
Previous attempts to document theatrical or musical performances with 360° cameras have fallen far short of exploiting the full potential of this medium. Paul McCartney, for example, had one of his concerts recorded with a 360° camera. The result was only in part satisfactory. Since the camera was positioned on stage, the viewer sees most of the musicians, and even McCartney, from the rear: the action was not directed at him, but towards the audience. Though a sense of participating in a historical event is transmitted, the experience comes closer to the perspective of a stowaway on an ocean voyage. The experience of an actual concert – reclined on a deckchair in a panorama lounge – is not conveyed.
The Camera at the Center of Events
One more interesting application is Jochen Sandig’s experiment of translating his production the Human Requiem into the new medium. The basic idea behind the production consisted in individual members of the choir unrecognizably mingling among the audience. The performance began with the piano prelude to Brahms’ A German Requiem. Only once singing began from among the audience did the choir members suddenly become visible. In the 360° film version, the members of the choir begin walking around the camera, as if at random, begin singing and very gradually forming a circle. The viewer is then encircled by the singers’ glances, who sing to him in whatever direction he turns.
Centripetal Theater
Let’s now try to imagine a performance of the Magic Flute, conceived for the 360° camera from the first day of rehearsal. Rather than being centrifugally aligned, as seen in the Arena di Verona, in this case, the action is aligned to the central point – centripetally. The viewer stands at the center of an action staged exclusively for him. The snake performs a spiral movement around the camera when, as in the first picture, it pursues Tamino. Tamino moves closer towards us when fleeing; the snake fills the picture from all directions to the point of even threatening to strangle the audience – Tamino has meanwhile passed out –, before finally being struck dead by the Three Ladies. Or Papageno’s encounter with the evil slave Monostatos. Here, the two rivals approach one another on a 180° axis: diametrically separated and compelling the spectator to swing violently here and there between the two poles – an uncomfortable sensation, allowing them to experience the conflict in all its immediacy.
The Production Process
Much like the staging of a classical opera, such a production requires an eight-week rehearsal period: in a first phase, on a rehearsal stage, and then in the studio with the final sets. There are piano rehearsals to begin with, before rehearsals with scenery and orchestra, lighting rehearsals and, finally, the dress rehearsal are carried out. Instead the opening night, we now have recording sessions: either two run-throughs every other day, or several recordings of single acts. The camera and elaborate recording equipment are used only during the recording sessions. Throughout rehearsals, the result can be simulated with the already available semi-professional equipment. The production outlay is only slightly in excess of a conventional opera production, and considerably less than that of cinematic opera productions, such as those by Zeffirelli, Ponnelle or Bergman.
The Audience as Director
The 360° medium could lead to a completely new kind of art experience in which the mediums of film and theater supplement one another in specific ways: The camera does not depart from its location at the center of the action, since this constitutes the medium’s great advantage. The director also dispenses with cutting, since, in this medium it is the audience which is left to decide about those excerpts he or she wishes to view. The field of human vision spans 180 degrees in the horizontal, and 130 degrees in the vertical. Therefore, the concentrically staged action around the center point compels the viewer to herself become active: in other words, to pan and, consequently, to cut. The director John Huston noted that we blink when looking from one object to another. For the editor Walter Murch this constitutes the basis of the film cut. Even in everyday life we cut up the flow of our perception and dissolve it into single takes. The same holds for the 360° film: we pan from one picture sequence to another and cut our own film.
Fairground Theater and Baroque Opera
The limited filmic means will be supplemented by classical theatrical devices: action, sets and lighting. The action fills the total continuum, from the central point through to the potentially endless horizon – effectively limited by the camera resolution. Scenery and lighting can produce a multiplicity of spaces, which separate, emerge and amalgamate. The space becomes dark, narrow and claustrophobic, until a rapid transformation surprisingly opens up and widens it. Doors can release axes of light: one side can be narrowly structured, whereas the other opens a depth dimension. It is precisely here that the old theatrical devices of Baroque opera and Fairground Theater show themselves as well-suited partners to the modern technology as provided by the 360° camera.
No Behind-the-Camera
In that there is no behind-the-camera in 360° film, the production process now becomes integral to the work. Here, the making-of – issued as bonus track in a classic film on DVD – is an alternative layer of the work which the viewer may select. He or she can pan upwards above the limits of the set, to the rigging loft and the lighting bridge. She might equally decide to focus her attention solely on the orchestra and director, and then experiences a concert film. And the next time, she returns to the main action, to the artificial world of the Magic Flute.
The Audience as Point
In 360° film theater, the Fourth Wall, with which Stanislavsky wished to imaginatively close the stage towards the auditorium, contracts into the extensionless point. By means of periscope, the viewer is witness to an action which – depending on the theater’s aesthetics – may acknowledge him or ignore him with uncommon clarity. Consequently, one is able to imagine a realistic Chekhov or Tchaikovsky production in which the audience is invisible guest in an alien world: murmuring is heard from all directions, flowers are ordered and the window is opened. At one point someone walks up very close to my camera-eye, while, at another, he is positioned at greater distance from it; I, however, am never be discovered. And one can imagine a commedia dell’arte on a Renaissance piazza where the actors make use of the omnipresent camera so as not only to tear down the fourth but all conceivable walls facing the audience.
The Audience on the Panorama Lounge
In 360° film revives a dream that bore witness to the incursion of industry in art from the late eighteenth century to the beginning of the twentieth century: the dream of taking possession of the world in Pan-Orama – the all-encompassing visual vantage point. Segantini’s Alpine Triptych and Monet’s Water Lilies were conceived as panoramas designed to ease the viewer’s submergence into their artistic worlds. The history of the panoramas is, in turn, the story of the ideal vantage point, the belvedere. All these topoi resurface once again in the new medium. The joy of the mountaineer, to whom the world suddenly reveals itself after a lengthy ascent, can be staged here: Tamino’s snake is dead, the darkness of the scenery is dissolved; the view broadens – and then » suddenly this overview «! (Fischli/Weiss)
Enlightened Immersion
The overriding objective of all VR developers is the total immersion of the viewer into an artificial world. In virtual reality, the passivity of the viewer is to be taken to an extreme. The 360° film, by contrast, may lead to enlightened immersion. In classic cinema and theater, the viewer is not totally submerged. She is back in her own world at a mere turn of her head. But she is bound to the sequence of images as presented by the director. In 360° film she is completely submerged. At the same time, however, she is her own director and cuts her own film – on each occasion a new one.
Opera for Tomorrow’s Audience
The art form of opera in its 400 year history has always strived and sought an exchange and communication with new forms of media and realized to reinvent itself in these new forms: opera recordings on vinyl and CD as well cinema, radio and TV broadcasts are examples of this. And just in the similar way, opera will continue to live on in virtual reality. It will create and bring about unexpected new facets and in this way will as well reach a new, young audience.
360° Oper
von Jan Schmidt-Garre, Januar 2016
360°
Das große Interesse an Virtual Reality, das von Facebooks Milliardeninvestion in den VR-Brillen-Entwickler Oculus Rift ausgelöst wurde und zuletzt das Sundance Film Festival und die Gamescom in Köln bestimmte, führt dazu, dass auch das Medium Aufmerksamkeit erfährt, das hinter der Technik steht: der 360°-Film. Mit diesen Filmen werden die Brillen gespeist, ergänzt um Aufnahmen der Ober- und Unterseite, so dass der Zuschauer in einer grenzenlosen, kugelförmigen Welt versinkt. Da das Medium noch so jung ist, können weder die Entwickler der Hardware, noch die Produzenten der Inhalte schon absehen, zu welcher Art von Erlebnissen es führen wird. Bisher stehen Spiele, Pornos und dokumentarische Formate – immersive journalism wie etwa in dem Kurzfilm Clouds over Sidra – im Vordergrund. Der 360°-Film bietet aber auch faszinierende Möglichkeiten für Theater, Oper und Tanz.
Die Kamera als blinder Passagier
Die bisherigen Versuche, mit 360°-Kameras theatralische oder musikalische Aufführungen zu dokumentieren, schöpfen das Potential dieses Mediums noch nicht annähernd aus. So hat Paul McCartney eines seiner Konzerte mit einer 360°-Kamera aufzeichnen lassen. Das Ergebnis ist unbefriedigend: Da die Kamera auf der Bühne steht, sieht der Zuschauer die meisten Musiker und gerade McCartney von hinten. Das Geschehen ist nicht auf ihn, sondern auf das Publikum im Saal ausgerichtet. Zwar überträgt sich ein Gefühl der Teilnahme an einem historischen Ereignis, aber es ist die Teilnahme eines blinden Passagiers an einer Ozeanfahrt. Das eigentliche Erlebnis des Konzerts – auf dem Liegestuhl des Panoramadecks – vermittelt sich nicht.
Die Kamera im Zentrum des Geschehens
Interessanter ist Jochen Sandigs Experiment, seine Inszenierung des Human Requiem ins neue Medium zu übersetzen. Die Grundidee der Inszenierung bestand darin, dass die Chorsänger äußerlich ununterscheidbar unter die Zuschauer gemischt waren. Die Aufführung setzte mit dem Klaviervorspiel zu Brahms’ Deutschem Requiem ein, und auf einmal begannen die Chorsänger aus der Mitte des Publikums heraus zu singen und wurden dadurch erst sichtbar. In der 360°-Filmversion laufen die Mitglieder des Chors wie zufällig um die Kamera herum, beginnen beiläufig zu singen und formieren sich ganz langsam zu einem Kreis. Schließlich ist der Betrachter umzingelt von den Blicken der Sänger, die zu ihm singen, egal wohin er sich dreht.
Zentripetales Theater
Man stelle sich nun eine Aufführung der Zauberflöte vor, die vom ersten Probentag an für die 360°-Kamera konzipiert ist. Statt zentrifugal wie in der Arena di Verona ist hier alle Aktion auf den Mittelpunkt ausgerichtet: zentripetal. Der Zuschauer steht in der Mitte eines Geschehens, das nur für ihn inszeniert wurde. Wenn im ersten Bild die Schlange Tamino verfolgt, würde sie eine Spiralbewegung um die Kamera vollziehen. Tamino kommt uns immer näher auf seiner Flucht, die Schlange füllt das Bild aus allen Richtungen, bis sie den Zuschauer selbst zu erwürgen droht und endlich – Tamino ist schon in Ohnmacht gefallen – von den Drei Damen niedergestreckt wird. Oder die Begegnung Papagenos mit dem bösen Sklaven Monostatos: Die beiden Kontrahenten bewegen sich auf einer 180°-Achse aufeinander zu, diametral getrennt und den Zuschauer zwingend, hart zwischen den beiden Polen hin- und herzuschwenken – eine unkomfortable Wahrnehmungssituation, die ihn den Konflikt unmittelbar erleben lässt.
Ablauf der Produktion
Eine solche Produktion muss wie eine klassische Operninszenierung acht Wochen lang geprobt werden, in einer ersten Phase auf einer Probebühne und dann im Studio mit den endgültigen Dekorationen. Anfangs gibt es Klavierproben, dann Proben mit Szene und Orchester, Beleuchtungsproben und schließlich die Haupt- und Generalprobe. Statt der Premiere folgen nun die Tage der Aufzeichnung: Entweder zwei Durchläufe alle zwei Tage oder mehrere Aufnahmen der einzelnen Akte. Nur an den Tagen der Aufzeichnung kommen die aufwändige Kamera und die Geräte für den (3D-)Ton zum Einsatz. Während der Proben lässt sich das Ergebnis günstig mit den bereits verfügbaren semiprofessionellen Geräten simulieren. Der Produktionsaufwand liegt demnach nicht weit über dem Aufwand einer konventionellen Opernproduktion und deutlich unter dem der Opernfilme fürs Kino, etwa von Zeffirelli, Ponnelle oder Bergman.
Der Zuschauer als Regisseur
Das 360°-Medium kann zu einem völlig neuartigen Kunsterlebnis führen, in dem Film- und Theatermittel sich in spezifischer Weise ergänzen: Die Kamera wird ihren Standort im Zentrum des Geschehens nicht verlassen, denn gerade der macht die große Stärke des Mediums aus. Auch auf Schnitte wird der Regisseur weitgehend verzichten, da es in diesem Medium dem Zuschauer überlassen ist, zu entscheiden, welchen Ausschnitt aus der Inszenierung er sehen möchte. Das Gesichtsfeld des Menschen beträgt in der Horizontalen maximal 180 Grad (in der Vertikalen 130). Die konzentrisch um den Mittelpunkt herum inszenierte Aktion zwingt den Zuschauer daher, tätig zu werden: zu schwenken und damit zu schneiden. Dem Regisseur John Huston ist aufgefallen, dass wir blinzeln, wenn wir von einem Gegenstand zum anderen blicken. Für den Editor Walter Murch ist dies die Grundlage des Filmschnitts. Schon im Alltag (zer-)schneiden wir also den Fluss unserer Wahrnehmung und lösen ihn in einzelne Einstellungen auf. So auch im 360°-Film: wir schwenken von Bildausschnitt zu Bildausschnitt und schneiden unseren eigenen Film.
Jahrmarktstheater und Barockoper
Die Beschränkung der filmischen Mittel wird durch die klassischen Mittel des Theaters kompensiert: Aktion, Bühne und Licht. Die Aktion füllt das gesamte Kontinuum vom zentralen Punkt bis zum potentiell unendlichen – faktisch von der Auflösung der Kamera begrenzten – Horizont. Bühne und Licht können eine Vielzahl von Räumen herstellen, die auseinander hervor- und ineinander übergehen. Der Raum wird dunkel, eng und klaustrophobisch sein, bis eine schnelle Verwandlung ihn überraschend öffnen und weiten wird. Türen können Lichtachsen freigeben, eine Seite kann eng bebaut sein, während die andere sich in die Tiefe öffnet – gerade alte Theatermittel aus der Barockoper und aus dem Jahrmarktstheater werden in der modernen Technik der 360°-Kamera ihren adäquaten Partner finden.
Kein Hinter-der-Kamera
Da es im 360°-Film kein Hinter der Kamera gibt, wird die Machart zum immanenten Bestandteil des Werks. Das Making-of – bei einem klassischen Film auf der DVD mitgeliefert als Bonus-Track – wird zu einer alternativen Schicht des Werks, für die der Zuschauer sich entscheiden kann. Er kann den Blick nach oben richten, über die Grenzen der Dekorationen hinaus, in den Schnürboden und die Beleuchtungsbrücke. Genausogut kann er sich entscheiden, seine Aufmerksamkeit nur dem Orchester und dem Dirigenten zu schenken und erlebt einen Konzertfilm. Und beim nächsten Mal kehrt er zum Hauptgeschehen zurück: in die Welt der Zauberflöte.
Der Zuschauer als Punkt
Im 360°-Film-Theater schrumpft die Vierte Wand, mit der Stanislawsky die Bühne in Richtung Zuschauerraum imaginär abschließen wollte, auf den ausdehnungslosen Punkt zusammen. Per Periskop ist der Zuschauer Zeuge eines Geschehens, das von ihm – je nach Theaterästhetik – Notiz nehmen oder ihn ignorieren kann, beides in ungewöhnlicher Deutlichkeit. So kann man eine realistische Tschechow- oder Tschaikowsky-Inszenierung imaginieren, in der der Zuschauer unsichtbarer Gast einer fremden Welt ist: aus allen Richtungen wird leise geredet, Blumen werden geordnet und Fenster geöffnet. Mal geht jemand ganz dicht an meinem Kameraauge vorbei, mal in großer Entfernung – nie jedoch werde ich ertappt. Und man kann sich eine Commedia dell’arte auf einem Renaissance-Platz in einer italienischen Kleinstadt vorstellen, wo die Akteure von der allgegenwärtigen Kamera Gebrauch machen, um nicht nur die vierte, sondern alle denkbaren Wände zum Zuschauer einzureißen.
Der Zuschauer auf dem Panoramadeck
Im 360°-Film lebt ein Traum wieder auf, der vom späten 18. bis zum Beginn des 20. Jahrhunderts vom Einbruch der Industrie in die Kunst zeugte: der Traum der Weltaneignung im Pan-Orama, der Alles-Schau. Noch Segantinis Alpentriptychon und Monets Seerosen wurden als Panoramen konzipiert, die den Betrachtern die Versenkung in ihre künstlerischen Welten ermöglichen sollten. Die Geschichte der Panoramen ist wiederum die Geschichte des idealen Standpunkts, des Belvedere. All diese Topoi finden sich im neuen Medium wieder. Das Glück des Bergsteigers, dem sich nach dem langen Aufstieg plötzlich die Welt öffnet, lässt sich hier inszenieren: Taminos Schlange ist tot, das Dunkel der Kulissen löst sich auf, der Blick weitet sich und – » plötzlich diese Übersicht! « (Fischli/Weiss)
Aufgeklärte Immersion
Das große Ziel aller VR-Entwickler ist die totale, regressive Immersion des Betrachters in eine künstliche Welt. Die Passivität des Zuschauers eines nach dem beat sheet der Drehbuchratgeber in Los Angeles konstruierten Films, bei dem er in der 80. Minute lacht, in der 100. weint und nach der 120. geläutert das Kino verlässt, soll in der virtual reality auf die Spitze getrieben werden. Der 360°-Film kann aber auch zu einer aufgeklärten Immersion führen. Im klassischen Kino und Theater versinkt der Zuschauer nicht total. Er braucht nur den Kopf umzudrehen und ist zurück in seiner Welt. Aber er ist an die Abfolge der Bilder gebunden, die der Regisseur ihm präsentiert. Im 360°-Film versinkt er ganz. Aber zugleich ist er sein eigener Regisseur und schneidet seinen eigenen Film – jedes Mal einen neuen.
Oper für den Zuschauer von morgen
Die Kunstform Oper hat in ihrer 400 Jahre alten Geschichte immer wieder den Austausch mit neuen Medien gesucht und sich in ihnen neu erfunden: in Schallplatte und CD, im Kino, im Radio und im Fernsehen. Auch in der Virtual Reality wird die Oper leben, unerwartete Facetten aufleuchten lassen und ein neues, junges Publikum erreichen. Gerade dort – sind doch beide auf das totale Erlebnis aus.
