Специалисты разработали нейросеть для управления музыкой движением руки

Группа ученых из России и Германии разработала нейросеть, которая позволяет человеку руководить звучанием музыки с помощью жестов. Для этого не нужно образование дирижера.

Благодаря совместной разработке немецких и российских ученых создана нейросеть, способная анализировать человеческие жесты при воспроизведении музыки. Отталкиваясь от движений рук и голосовых команд, нейросеть позволяет регулировать звучание классической музыки, как если бы на сцене стоял истинный дирижер. Об этом сообщается в издании Frontiers in Artificial Intelligence.

Авторы работы заверяют, что теперь управлять воспроизведением классики сможет и человек, не прошедший музыкальную школу. Нейросеть GPT-3 исполняет ноты, а человек с помощью приложения и команд задает им особый колорит. Шопен под воздействием дирижера смог стать колыбельной.

В настоящий момент авторы работают над новой версией нейросети, чтобы она могла играть не только классику.

Ранее «PRO город будущего» сообщал, что ученые разработали алгоритм оценки высоты человеческого голоса.

Ученые из Японии создали разработку для рисования картинок из мозга человека

Ученые представят нейросеть для разработки интерьеров на Сибирской биеннале дизайна

Гибрид риса и мяса создали в Южной Корее