Разработчики исследовательского проекта Magenta — отдельной группы Google Brain, которая изучает творческий потенциал глубокого машинного обучения — и Google Creative Lab представили нового бота AI Duet. Он слушает мелодию, которую пользователь играет на виртуальном пианино, а затем самостоятельно «отвечает» на нее. Систему AI Duet, о которой рассказывается в блоге Google, можно протестировать здесь.
Исследовательская группа Magenta начала официально работать в июне 2016 года, однако первые наработки в области музыкального творчества машин уже были
в мае на фестивале Moogfest в США. Тогда компьютерный алгоритм на основе пяти полученных нот
короткую импровизацию. Первым проектом команды Magenta стала программа для импорта музыки из MIDI-файлов в платформу машинного обучения
Новый бот
позволяет человеку сыграть дуэтом с компьютером. Пользователю достаточно исполнить на виртуальном пианино простую мелодию, а нейросеть обработает ее и выдаст музыкальный ответ. Как сообщает Google, для обучения алгоритма использовались тысячи композиций, на основе которых система научилась понимать отношения между нотами. При этом разработчики не обучали AI Duet распознавать регистр и ритм композиции — с этой задачей программа справилась самостоятельно.
Импровизации компьютера все еще остаются простыми и во многом кажутся случайными. Тем не менее, исследователи рассчитывают, что AI Duet пригодится музыкантам в их творчестве.
Исследователи уже неоднократно использовали машинное обучение в творчестве. В прошлом году ученые
нейросеть, которая умеет в режиме реального времени сочинять песню про предметы, показанные на фотографиях, а также систему искусственного интеллекта, которая научилась сочинять стихи, и была
для записи альбома в стилистике группы «Гражданская оборона». Кроме того, в Google Brains
алгоритм создавать подобие подростковой поэзии.