Группа ученых из России и Германии разработала нейросеть, которая позволяет человеку руководить звучанием музыки с помощью жестов. Для этого не нужно образование дирижера.
Благодаря совместной разработке немецких и российских ученых создана нейросеть, способная анализировать человеческие жесты при воспроизведении музыки. Отталкиваясь от движений рук и голосовых команд, нейросеть позволяет регулировать звучание классической музыки, как если бы на сцене стоял истинный дирижер. Об этом сообщается в издании Frontiers in Artificial Intelligence.
Авторы работы заверяют, что теперь управлять воспроизведением классики сможет и человек, не прошедший музыкальную школу. Нейросеть GPT-3 исполняет ноты, а человек с помощью приложения и команд задает им особый колорит. Шопен под воздействием дирижера смог стать колыбельной.
В настоящий момент авторы работают над новой версией нейросети, чтобы она могла играть не только классику.
Ранее «PRO город будущего» сообщал, что ученые разработали алгоритм оценки высоты человеческого голоса.