Dr inż. Mateusz Modrzejewski z Zakładu Grafiki Komputerowej Wydziału Elektroniki i Technik Informacyjnych Politechniki Warszawskiej (PW) prowadzi pionierskie w skali światowej prace na temat zastosowań sztucznej inteligencji i głębokich sieci neuronowych do analizy oraz tworzenia muzyki.
Dr Modrzejewski szuka odpowiedzi na pytania z zakresu music information retrieval. Zastanawia się m.in. nad tym, czy algorytmy sztucznej inteligencji mogą zastąpić dyrygenta, jaka jest szansa, że instrumenty nauczą się same grać i co różniłoby muzykę pisaną przez automat i przez człowieka.
Jak informuje PW, badania dr inż. Mateusza Modrzejewskiego opierają się na wykorzystaniu głębokich modeli neuronowych, w tym sieci rekurencyjnych i generatywnych sieci typu GAN oraz nowoczesnych reprezentacji opartych na podejściu transfer learning.
Nowe metody opracowywane są z wykorzystaniem dużych zbiorów danych w formacie audio i w formatach symbolicznych, takich jak MIDI (Musical Instruments Digital Interface). Po przetworzeniu poszczególnych utworów z wykorzystaniem algorytmów sztucznej inteligencji, możliwe jest wygenerowanie zupełnie nowej muzyki spełniającej określone założenia czy też trafna i dokładna klasyfikacja istniejącej muzyki według zadanych kryteriów, takich jak identyfikacja wokalisty, nastroju i instrumentów czy też rozpoznanie gatunku muzycznego.
Naukowiec z PW jest też perkusistą koncertującym m.in. w Chinach, Wietnamie, Niemczech, Szkocji, Anglii, Estonii, Ukrainie, oraz na wielu festiwalach i wydarzeniach muzycznych w Polsce.
W prowadzonych badaniach łączę swoje dwie największe pasje; muzykę oraz zagadnienia związane z głębokimi sieciami neuronowymi będącymi podstawą uczenia maszynowego i zastosowań sztucznej inteligencji – wyjaśnia dr inż. Mateusz Modrzejewski. Jako jazzowy perkusista z bogatym doświadczeniem scenicznym znam i rozumiem strukturę muzyki, a jako inżynier zapisuję ją nie tylko w postaci nut, ale także przedstawiam w języku komputerowym. A to jest doskonały zbiór danych wejściowych do maszynowego przetwarzania, analizy i komponowania utworów przez algorytmy sztucznej inteligencji – dodaje warszawski naukowiec.
Adrian Andrzejewski