Die beiden Gründer Alexander Lüngen und Sebastian Murgul haben eine App entwickelt, die vorgespielte Musik durch Künstliche Intelligenz in niedergeschriebene Noten verwandelt. Die verschiedenen Apps Piano2Notes, Guitar2Tabs, Sing2Notes und Melody Scanner decken dabei insgesamt Klavier-, Gitarren-, Gesangs- und Pop-Melodien ab.

Klangio-Idee durch Schwester

Musizierende können sich beim Spielen aufnehmen und erhalten durch das KI-System schnell ein fertiges Notenblatt. Egal ob es um das Komponieren neuer Songs oder das Herausfinden von Noten zu einer Musikaufnahme geht – das Transkribieren von Noten entfalle.

Dabei ist keine Registrierung erforderlich und funktioniert auch über den Browser, ohne Download-Zwang. Unterstützte Web-Apps: Google Chrome, Safari, Firefox, Android App im Google Play Store oder IOS App im Apple App Store. Die Transkription wird als Noten und Tabulatur durchgeführt.

Deep Learning

Zur Audioverarbeitung nutzt Klangio ein „Deep Learning“-Verfahren. Durch Millionen Beispiele aus der Musikwelt haben Murgul und Lüngen ihrem Algorithmus beigebracht, Töne nicht nur zu registrieren, sondern auch die musikalischen Zusammenhänge zu verstehen.

Durch diese gezielte Verarbeitung mittels des KI-Algorithmus werde eine bessere Genauigkeit der Notenerfassung, aber auch ein feinerer Detailgrad der generierten Notenblätter erreicht. Ein besonderer Fokus liegt zudem auf der Spielbarkeit der Transkription. Beispielsweise erfolgt die optimale Trennung zwischen linker und rechter Hand. Zudem ist eine Mehrstimmigkeit von bis zu vier Stimmen möglich. Gleichzeitig detektiert der Algorithmus die Dynamik der Töne. Damit ermöglicht etwa Piano2Notes eine detailgenaue Transkription.

Die Idee dazu kam Murgul durch seine kleine Schwester, als sie auf ihrem E-Piano eine abgespeicherte Melodie nachspielen wollte, jedoch die Noten dazu fehlten.

Das Produkt selbst wurde anfangs noch im kleinen Studentenzimmer hochgezogen und ist inzwischen nicht nur Thema seiner Doktorarbeit, sondern auch eine Marke, worauf er besonders stolz ist.

Auch für Menschen ohne musikalisches Gehör

„Mich begeistert es, Menschen durch KI so zu unterstützen, dass auch jene, die nicht mit einem guten Gehör ausgestattet sind, die Möglichkeit erhalten, einzelne Noten aus Musik herauszuhören“, wird er auf der Website des Startups zitiert. Sein Partner Lüngen kümmert sich als Informatiker bei Klangio um die Produktentwicklung und die Effizienz des KI-Systems.

Mehr dazu am Montag in der Höhle der Löwen. Weiters dabei: Millis Zaubertücher, Bello Eis, FreeMom und dripoff-Pad.