Spatial Dis/Continuities in Telematic Performances

Unraveling distributed space through 3D-audio, embodiment and Spatial Augmented Reality

Institute for Computer Music and Sound Technology (ICST)

Telematische Aufführungen verbinden zwei oder mehr geographisch voneinander entfernte Bühnen über Kommunikationstechnologien so, dass Aufführende miteinander interagieren können. Das Publikum erfährt dabei an den verschiedenen Orten einen je spezifischen Einblick in das Gesamtgeschehen, wobei sich Realpräsenz der lokalen und virtuellen Präsenz der zugespielten Performer simultan überlagern.

Im Zentrum bisheriger Forschung standen technologische Entwicklungen, die eine Verbindung in hoher Qualität und niedriger Latenz ermöglichen, sowie die Minimierung oder der künstlerische Umgang mit Latenz, also der Verzögerung in der Übertragung von Audio- und Videosignalen. Aufgrund der meist flachen Repräsentation der entfernten Performer auf einer statischen Leinwand (Video) und in einem Stereomonitoring (Audio) gehen dabei die räumlichen Informationen der Fernbühne weitgehend verloren. Das Forschungsprojekt untersucht, wie sich räumliche Charakteristiken aus den involvierten Bühnen überlagern. Dabei greift es auf aktuelle Technologien wie 3D-Audio (Klänge werden dabei in hoher räumlicher Auflösung wiedergegeben) sowie auf Techniken der «Spatial Augmented Reality» zurück (bei der vermittels Motion Tracking und Videomapping visuelle Informationen aus der Fernbühne in die lokale Szenographie eingebunden werden). Besonderes Augenmerk gilt dabei Formen von Verkörperung und von Kommunikationsprozessen, die eine immersive Erfahrung ermöglichen.

  • Aufsätze in Tagungsakten (Vortrag, Keynote)

    Fröhlich, Martin / Müller, Patrick & Haefeli, Roman (2024): «Telemersive Toolkit: Exchange Multi Media Streams for Distributed Networked Performance Installations». IMX '24: Proceedings of the 2024 ACM International Conference on Interactive Media Experiences. 354–360. Online unter: https://doi.org/10.1145/3639701.3663637.

  • Aufsätze in Tagungsakten (Vortrag, Keynote)

    Müller, Patrick / Haefeli, Roman / Schütt, Johannes & Ziegler, Matthias (2024): «Telemersive Audio Systems for Online Jamming». 2024 IEEE 5th International Symposium on the Internet of Sounds (IS2). New York: IEEE, 1–15. Online unter: https://doi.org/10.1109/IS262782.2024.10704096.

  • Aufsätze in Tagungsakten (Vortrag, Keynote)

    Walter, Hannah / Larrieux, Eric / Torche, Robert / Spindler, Cedric & Müller, Patrick (2024): «NEXUS: A Tangible Multi-User Sensor-Based Telematic Novel Mixing-Interface for Multimedial Exploration». In: Ludovico, Luca Andrea & Mauro, Davide Andrea (Hg.): Proceedings of the 19th International Audio Mostly Conference: Explorations in Sonic Cultures. New York: Association for Computing Machinery, 245–259. Online unter: https://doi.org/10.5281/zenodo.14474632.

  • Software-Veröffentlichungen

    Haefeli, Roman / Schütt, Johannes /Ziegler, Matthias / Müller, Patrick (2020): «TPF-TOOLS 1.1beta5. Telematic-Performance-Tools». Online unter: https://github.com/joambi/tpf-tools-installers.

  • Ausstellungen, Konzerte, Aufführungen, Filmpräsentationen etc.

    Walter, HannaH / Torche, Robert / Jüngling, Margaretha / Fonseka, Anja / Mégroz, Julien / Larrieux, Eric / Spindler, Cedric / Chimère Électrique & Kollektiv Mycelium (2023): «KOMPOST*KLANG*KÜCHE*». Eine telematische Performance für 5 Performer:innen an 2 simultan über das Internet verbundenen Orten. 07.09.2023–10.09.2023. Musikfestival Bern, Bern. Online unter: https://collective-mycelium.ch/kompost-klang-kuche.

  • Ausstellungen, Konzerte, Aufführungen, Filmpräsentationen etc.

    Walter, HannaH / Torche, Robert / Chimère Électrique & Kollektiv Mycelium (2022): «MICRO. Listening to the Micro Practice of Telesonocephalopoda». Chimaera (2022) Videoessay / MetaMother (2022) Klanginstallation für 6 Performer:innen / tele-sono-cephalopodes (2022) Telematische Klangperformance für 6 Performer:innen. Flöte / Bassklarinette / Violoncello / Violine / Klarinette / Akkordeon / Elektronik. 01.11.2022. Zürcher Hochschule der Künste, Zürich.

  • Ausstellungen, Konzerte, Aufführungen, Filmpräsentationen etc.

    Walter, HannaH / Torche, Robert / Chimère Électrique & Kollektiv Mycelium (2022): «MICRO. Listening to the Micro Practice of Telesonocephalopoda». Chimaera (2022) Videoessay / MetaMother (2022) Klanginstallation für 6 Performer:innen / tele-sono-cephalopodes (2022) Telematische Klangperformance für 6 Performer:innen. Flöte / Bassklarinette / Violoncello / Violine / Klarinette / Akkordeon / Elektronik. 11.05.2022. Gare du Nord, Basel.

  • Ausstellungen, Konzerte, Aufführungen, Filmpräsentationen etc.

    Walter, HannaH / Torche, Robert / Chimère Électrique & Kollektiv Mycelium (2022): «MICRO. Listening to the Micro Practice of Telesonocephalopoda». Chimaera (2022) Videoessay / MetaMother (2022) Klanginstallation für 6 Performer:innen / tele-sono-cephalopodes (2022) Telematische Klangperformance für 6 Performer:innen an 6 verschiedenen Orten. Flöte / Bassklarinette / Violoncello / Violine / Klarinette / Akkordeon / Elektronik. 11.05.2022. Musée des beaux-arts de La Chaux-de-Fonds, La Chaux-de-Fonds.

  • Ausstellungen, Konzerte, Aufführungen, Filmpräsentationen etc.

    Walter, HannaH / Kollektiv Mycelium (2021): «Patient Nr. 3561». HannaH Walter & Robert Torche: Schnüre-Verlesen (2021) für einen Performer und Tonbandmaschinen / HannaH Walter & Robert Torche: Abschreiben im Tele-Masken-Gebiet (2021) Telematische Performance mit Rückkopplungen für 4 entfernte Räume, Violine, Violoncel. Performance und Ausstellung. HannaH Walter, Violine / Kaspar von Grüningen, Kontrabass / Charlotte Lorenz, Violoncello / Samuel Fried, Tonbandmaschinen / Ernesto Coba, Audio Design / Nicola Mišić, Audio Design / Cedric Spindler, Audio Design. 16.09.2021–19.12.2021. Ziegelhütte des Kunstmuseums Appenzell, Appenzell.

  • Ausstellungen, Konzerte, Aufführungen, Filmpräsentationen etc.

    Müller, Patrick & Kung Chi Shing (2020): «Freespace Jazz Fest: Experimental Jazz Lab. Telematic Concert between Hong Kong and Zurich with Live-Streaming». Telematic concert with live-streaming. 08.11.2020–08.11.2020. The Room, West Kowloon Cultural District, Hong Kong; Concert Hall 1, Toni-Areal, Zurich University of the Arts, Zürich, Hong Kong. Online unter: https://www.youtube.com/watch?v=YDhMTqniC9k&t=29199s.

  • Vorträge, Referate

    Burger, Benjamin / Herm, Henriette-Friederike / O'Dwyer, Tim & Quek, Lynette (2024): «Shared Campus: Teleprovisation Summer School». Nownet Arts Conference: Network Arts Aesthetics. 31.08.2024. Zürich / Singapore. Online unter: https://nownetarts.org/nownet-arts-conference-2024.

  • Vorträge, Referate

    Fröhlich, Martin (2024): «Telemersive Toolkit: Exchange Multi Media Streams for Distributed Networked Performance Installations». ACM International Conference on Interactive Media Experiences (IMX). 14.06.2024. Stockholm. Online unter: https://imx.acm.org/2024/.

  • Vorträge, Referate

    Müller, Patrick (2024): «Telemersive audio systems for online jamming». IEEE International Symposium on the Internet of Sounds. 02.10.2024. Erlangen. Online unter: https://internetofsounds2024.ieee-is2.org/.

  • Vorträge, Referate

    Walter, Hannah Vyborg & Larrieux, Eric (2024): «NEXUS: A Tangible Multi-User Sensor-Based Telematic Novel Mixing-Interface for Multimedial Exploration». Audio Mostly. A Conference on Interaction With Sound. 19.09.2024. Milan. Online unter: https://audiomostly.com/2024/.

  • Vorträge, Referate

    Walter, HannaH Vyborg / Torche, Robert / Spindler, Cedric / Fonseca, Erwin / Riniker, Daniel / Larrieux, Eric / Fröhlich, Martin & Müller, Patrick (2024): «Sympoietic World-Making: Bridging Spaces through Telematic Performance and Multimedia Mixing». 29th International Symposium on Electronic Art (ISEA). 22.06.2024. Brisbane. Online unter: https://isea2024.isea-international.org/workshop/.

  • Vorträge, Referate

    Hannah Walter (2023): «Now Net Arts Conference 2023. Immersion in Network Arts: Innovations for Artistic and Technical Design». soil*food*sound*intra*action. 02.11.2023. Online.

  • Vorträge, Referate

    Walter, HannaH (2022): «becoming vyborg. becoming with technology». Un/Learning: Norms and Routines in Cultural Practice. 31.08.2022–04.09.2022, HS 2022. Hotel Marienhof, Reichenau/Rax, Austria & online, Reichenau/Rax, Austria & online.

  • Andere aktive Teilnahmen (Podiumsteilnahme, Posterpräsentation etc.)

    Walter, HannaH / Müller, Patrick (2022): «becoming vyborg». PhD Poster Session im Rahmen der Ars Electronica. 08.09.2022–08.09.2022, HS 2022. Kunstuniversität Linz, Linz.

  • Anstellung / Mitarbeit am Institut

    Müller, Patrick (2020): Benjamin Burger, Anstellung am ICST. 01.10.2020–30.09.2021. Zürich.

  • Anstellung / Mitarbeit am Institut

    Müller, Patrick (2020): Joel De Giovanni, Anstellung am ICST. 01.10.2020–30.09.2021. Zürich.

  • Anstellung / Mitarbeit am Institut

    Müller, Patrick (2020): Roman Haefeli, Anstellung am ICST. 01.10.2020–30.09.2021. Zürich.