Zusammenfassung

Mirelo Audio-to-MIDI ist ein KI-basiertes Werkzeug, das von Mirelo und kyutai entwickelt wurde, um Mehrspur-Audioaufnahmen in editierbare MIDI- und MusicXML-Dateien zu transkribieren. Es erkennt automatisch einzelne Instrumente innerhalb eines kompletten Mixes und trennt jedes in eine eigene MIDI-Spur zur weiteren Bearbeitung und zum Export.

Funktionen

• Automatische Instrumentenerkennung und -beschriftung für Parts wie Gesang, Schlagzeug, E-Bass und Synth Lead.
• Erzeugung separater MIDI-Spuren pro erkanntem Instrument, dargestellt in einer Piano-Roll-Oberfläche zur manuellen Überprüfung und Anpassung.
• Analyse des musikalischen Kontexts zur Erkennung von Akkorden, Tonart und Tempo, die Anwendungen wie Sound-to-MIDI unterstützt.
• Ein-Klick-Exportfunktionalität zum Solieren, Stummschalten oder Herunterladen von MIDI-Spuren und deren Import in jede DAW.
• Das Modell ist Open Source und wurde mit einem großen Datensatz trainiert, mit Ressourcen verfügbar auf GitHub und Huggingface.
• Direkt über Mirelo Studio zugänglich, ohne Installation erforderlich, und ebenfalls über eine API verfügbar.

Für wen

Dieses Werkzeug richtet sich an Musiker, Produzenten und Entwickler, die daran interessiert sind, Audioaufnahmen in editierbare MIDI-Daten umzuwandeln – zum Remixen, Analysieren oder zur Integration in Musiksoftware.