Multiperspective Music

Die zweite Mazetools App legt den Fokus auf Live-Interaktion zum Spielen der verschiedenen Instrumente. Die Melodien, Beats und Klangfächen aus verschiedenen Perspektiven gehört und über Netzwerk zusammen komponiert werden. Mutant verfügt über eine interne Speicher-Cloud, um den musikalischen Prozess darzustellen, Snapshots auf neue Weise zu verorten und zu kombinieren.

Versionen

2020: 1.0
2021: 1.5
2023: 2.0

Credits 

Copyright Stephan Kloß 2013-2023, Produktion Ectoplastic UG (haftungsbeschränkt) 2017-2023. Mazetools ist eine geschützte Marke. Die Software wird in Unity entwickelt.

Stephan Kloß - Idee, Konzept, Forschung, Entwicklung, Programmierung, Design, Presets
Jakob Gruhl - Konzept, Forschung, Management, Dokumentation, Support, Presets
Marc-André Weibezahn - iOS& MacOS Build, iOS& MacOS Connectivity, Audiobus & IAA Implementierung

Die im Motion Interface mitgelieferten Captures werden mit freundlicher Genehmigung der Musikerin und Performering Mia Gara zu Verfügung gestellt.
Ectoplastic Font mit freundlicher Genehmigung von Manuel von Gebhardy.
Guide Grafiken mit freundlicher Genehmigung von Jan Lorenz.

Audio Samples mit freundlicher Genehmigung von Omar Shalash, Seth Schwarz, Marthe Hovitz, Sucram Lebah, Matthias Bruchmüller, Jan Lorenz, Felix Deufel, Stephan Kloß, Jakob Gruhl.

Besonderer Dank an die Leute der ersten Stunde und die, die uns erst seit kurzem unterstützen. Vielen Dank an: Jan Lorenz, Elisabeth Reiche, Mia Gara, Emil Kloß, Karoline, Mascha& Anuk Schneider, Martin Zschornak, Sarah Signer, Sophie Mildner, Colette Dörrwand, Diana Tillmann, Sepp Müller, Drizzy, Georg Blanke, Clemens Jurk, Prof. Uli Kühnle, Prof. Anette Scholz, das ZiMMT Team & Music Tech Germany!

Die App

Mutant ist eine App zwischen einer experimentellen kompositorischen Erfahrung und einer interaktiven Musikszene, bei der jeder Raum seine eigene Stimmung und Dynamik hat. Die App basiert auf dem gleichen Mazetools Core wie Soniface, folgt jedoch einer eigenen Struktur und Prozesshaftigkeit. Sie beinhaltet verschiedene Synthesizer, Drum Machines und Sampler, um intuitiv, loop-basierte, elektronische Musik zu erzeugen.
Das visuelle Mittel des Tesserakts ist eine Metapher für eine hyper-dimensionale Betrachtung verschiedener musikalischer Elemente und Betrachtungen. In den acht Zellen werden Melodien und Rhythmen in Tempo und Tonlage variiert/ mutiert. Die Komposition kann so aus unterschiedlichen Perspektiven gehört werden. 7 Cubes bieten insgesamt 56 musikalische Grundeinstellungen, die frei gewechselt und neu interpretiert werden können.

Ausgangspunkt

Kollaborative Anwendungen machen es möglich, zusammen und gleichzeitig an einem Dokument, Code oder Track zu arbeiten. Neben neuen Werkzeugen, die Kompositionen mit Unterstützung von künstlicher Intelligenz erstellen, synchronisieren etablierte digitale Schnittstellen Geräte, Instrumente und Apps durch kollaborativen Datenaustausch.
Mutant widmet sich der Frage, was entsteht, wenn zwei oder mehrere Nutzer zusammen ein Musikstück in Echtzeit gestalten, während sie es in jeweils unterschiedlichen Geschwindigkeiten und Tonarten hören, zum Beipiel von House zu HipHop Tempo, oder von Dur zu Mol. Ausgehend davon wurden verschiedene Experimente durchgeführt, Interaktions- und Verhaltensweisen kollaborierender Nutzer untersucht, wie auch nach Lösungen und Parametern geforscht, Musik multiperspektivisch abzubilden.
Basierend auf dem Mazetools-Core begann der Entwicklungsprozess von Mutant mit einem Prototyp im Rahmen der Masterarbeit von Stephan Kloss 2019. Während der Weiterentwicklung zu einer plattformübergreifenden App gaben leidenschaftliche Beta-Tester wichtiges Feedback für die Veröffentlichung von Mutant 1.0.

Das Konzept

Der Prototyp “Mutant” ist eine Mehrspieler-Anwendung zur Gestaltung von Klang und Musik. Im Zentrum der Anwendung steht der Tesserakt. Dieser vierdimensionale Körper kommt dabei vor allem als gestalterische Metapher zum Einsatz. Dessen acht Zellen stehen in der Anwendung für acht verschiedene Perspektiven auf ein und dasselbe Musikstück, welches durch Touch-Interaktionen entsteht.Die Spieler können zwischen diesen Zellen frei wechseln und 7 verschiedene Instrumente spielen. Jedes Instrument besteht wiederum aus 4 verschiedenen Steuer-Modulen/ Sound-Controllern, die es ermöglichen, über Touch-Gesten mit bis zu 4 Fingern, Melodien oder Rhythmen einzuspielen und intuitiv klanglich zu verändern.

Navigation im Tesserakt

Jede der acht Tesserakt-Zellen hat eigene Vorgaben, wie die Instrumente klingen und in welcher klanglichen Umgebung das Musikstück stattfindet. Das Navigationssystem ermöglicht es den Spielern, über die Drehung des Tesserakts in andere Zellen zu gelangen. Dabei verändern sich Grundtöne und Tempo nach definierten Parametern und geben die gleichen aufgenommenen Noten und Werte in einer anderen Charakteristik wieder. Die eingespielten Melodien und Rhythmen können so aus verschiedenen musikalischen und klanglichen Perspektiven gehört, neu erfahren und weiterentwickelt werden.
Für eine komplexere, tiefergehende Bearbeitung kann jede Zelle in Tonart, Tonhöhe, Tempo (bpm), Nachhall und Effekten bearbeitet werden. Der Zelleneditor verfügt außerdem über ein Noten-Interface mit Akkord-Presets und Skalen und zusätzliche visuelle Elemente.

Kollaboration, Loop-Recording und Datensynchronisation

Ähnlich wie Musiker mit Loop-Machines arbeiten, werden alle Touch-Interaktionen per Loop-Recording aufgezeichnet und wiedergegeben. Die über ein lokales Netzwerk miteinander verbundenen Geräte tauschen die aufgezeichneten Daten in Form von Daten-Loops aus. Diese haben jeweils eine feste Taktlänge und Auflösung und können in unterschiedlichen Geschwindigkeiten geschrieben und wiedergegeben werden.
Der Datenaustausch über OSC (Open Sound Control) findet in zwei separaten Schritten statt: Im ersten Schritt wird die Interaktion des jeweiligen Teilnehmers auf den anderen Geräten vorerst nur visualisiert. Erst im zweiten Schritt – nach Abschluss der Interaktion werden die aufgezeichneten Daten übertragen. Erst dann können die anderen Spieler die Veränderungen hören. Die Unterteilung des Datenaustauschs in diese zwei Schritte sorgt für eine takt-synchrone Wiedergabe der eingespielten Melodien und Rhythmen bei unterschiedlichen Geschwindigkeiten.

Mutant Musikalbum

Unter dem Titel Dr.Eck - Bredlow hat Mutant Entwickler Stephan Kloß ein Album veröffentlicht, welches 2021 ausschließlich mit der App produziert wurde. Es findet sich auf der LSS Records Bandcamp Seite und auf dieser Webseite unter dem Bereich Musik. Im Folgenden die Live Performance zum Stück “Fly”.