Musik-Automat

Mit der KI im musikalischen Frage-Antwort-Spiel

Woman hands playing music notes
© ipopba - stock.adobe.com

Ziel des Projekts »Musik-Automat« ist die Entwicklung einer KI-basierten App, die Musikerinnen und Musiker beim Komponieren unterstützt. Musikerinnen und Musiker sollen dazu animiert werden, mit Hilfe eines interaktiven Dialogs, der speziell für musikalisches Material entwickelt wird, neue Ideen zu kreieren.

Im Mittelpunkt steht die Erforschung neuer Methoden zur Musikdatenverarbeitung mit neuronalen Netzen und die Schaffung einer leistungsfähigen, interessanten und lehrreichen App: Sie wird in einem Webbrowser implementiert und ermöglicht den Nutzerinnen und Nutzern, interaktiv Noten einzugeben und "live" zu komponieren, wodurch sie einen Dialog mit der Maschine führen können – fast wie ein Spiel, bei dem Mensch und Maschine die musikalischen Sätze des anderen beginnen, fortsetzen und beenden können.

Deep-Learning-Techniken für die Analyse und Erzeugung von Musik

Andrew McLeod wird sein Know-how über Deep-Learning-Techniken für die Analyse und Erzeugung von Musik in das Projekt einbringen. Dazu gehört die Beratung zu Modelldesign und Trainingsmethoden sowie die Darstellung von Eingabe- und Ausgabedaten. Außerdem schaffen wir Zugang zu geeigneten Musikdatensätzen und unterstützen die Front-End Entwicklung für das interaktive Spiel.

Projektpartner

  • Prof. Jörn Arnecke, Hochschule für Musik FRANZ LISZT Weimar (Projektleitung)
  • Alex Vaughan, Hochschule für Musik FRANZ LISZT Weimar

Laufzeit

Oktober 2023 – Dezember 2024

Förderer

Das Projekt wird im Rahmen des Fellowships für Innovationen in der digitalen Hochschullehre an Thüringer Hochschulen durch den Stifterverband und das Thüringer Ministerium für Wirtschaft, Wissenschaft und Digitale Gesellschaft gefördert.