Пользователи смогут сыграть дуэт вместе с нейросетью

Робот Бендер играет на пианино

Futurama / Curiosity Company, 1999-2013

Разработчики исследовательского проекта Magenta — отдельной группы Google Brain, которая изучает творческий потенциал глубокого машинного обучения — и Google Creative Lab представили нового бота AI Duet. Он слушает мелодию, которую пользователь играет на виртуальном пианино, а затем самостоятельно «отвечает» на нее. Систему AI Duet, о которой рассказывается в блоге Google, можно протестировать здесь.

Исследовательская группа Magenta начала официально работать в июне 2016 года, однако первые наработки в области музыкального творчества машин уже были представлены в мае на фестивале Moogfest в США. Тогда компьютерный алгоритм на основе пяти полученных нот сыграл короткую импровизацию. Первым проектом команды Magenta стала программа для импорта музыки из MIDI-файлов в платформу машинного обучения TensorFlow.

Новый бот AI Duet позволяет человеку сыграть дуэтом с компьютером. Пользователю достаточно исполнить на виртуальном пианино простую мелодию, а нейросеть обработает ее и выдаст музыкальный ответ. Как сообщает Google, для обучения алгоритма использовались тысячи композиций, на основе которых система научилась понимать отношения между нотами. При этом разработчики не обучали AI Duet распознавать регистр и ритм композиции — с этой задачей программа справилась самостоятельно.



Импровизации компьютера все еще остаются простыми и во многом кажутся случайными. Тем не менее, исследователи рассчитывают, что AI Duet пригодится музыкантам в их творчестве.

Исследователи уже неоднократно использовали машинное обучение в творчестве. В прошлом году ученые создали нейросеть, которая умеет в режиме реального времени сочинять песню про предметы, показанные на фотографиях, а также систему искусственного интеллекта, которая научилась сочинять стихи, и была использована для записи альбома в стилистике группы «Гражданская оборона». Кроме того, в Google Brains  научили алгоритм создавать подобие подростковой поэзии.

Кристина Уласович


Нашли опечатку? Выделите фрагмент и нажмите Ctrl+Enter.