Software für die Synchronisation von Bewegungs-, Ton-, Video- und Notenparameter
Das Projekt soll eine Visualisierungssoftware entwickeln, welche die automatische Synchronisierung von Bewegungsparametern einerseits und von Ton- und Videoaufnahmen mit Notentextelementen in MIDI-Format andererseits ermöglicht. Diese automatisierte Lösung ergänzt die mittels Prisma und Sonic Visualizer zurzeit schon erfolgende Analyse von Tonaufnahmen hinsichtlich Zeitgestaltung und Dynamik. Gegenwärtig kann die oben beschriebene Synchronisation von Bewegungs-, Ton-, und Videomaterial nur teilweise geleistet werden. Bereits in Matlabsprache implementierte Lösungen wurden von der ITET der ETHZ für Muskel-, Bewegungs-, und Tonparameter vorgelegt. Für Video-Notationen wurden komplexe Lösungen erarbeitet, z.B. in Form des Programms ANVIL. Die spezielle Herausforderung der Erarbeitung einer neuen Software besteht darin, die unterschiedlichen Zeitkodierungen der einzelnen Parameter zu koordinieren und eine einfache Visualisierungsoberfläche herzustellen. Die neue Software eröffnet weiterhin Möglichkeiten zur vergleichenden Analyse des Bewegungsverhaltens beim Dirigieren und Tanzen während realistischen Bühnenauftritten.