Нейросеть научили дополнять партию бас-гитары игрой на барабанах

Корпорация Google представила новую разработку в области искусственного интеллекта, которую намечено подробно продемонстрировать на предстоящей в июне международной конференции ICML 2019. Новинка представляет собой набор нейросетевых алгоритмов GrooVAE, создающий реалистичные барабанные партии для мелодии, заданной другим инструментом.

Авторами разработки стала исследовательская группа Magenta, работающая в рамках корпоративного проекта Google Brain. Специалисты показали действующие нейросетевые модели, создающие партии ударных инструментов в дополнение к любой цифровой записи, сделанной на бас-гитаре или музыкальном синтезаторе. Алгоритм использует датасет работы электронной ударной установки, сформированный из из MIDI-нот, а также разных по силе и частоте типов ударов, смещению или удлинению каждого конкретного удара относительно доли.

Разработка реализована в виде двух плагинов для популярного музыкального редактора Ableton Live. Кроме того, любому желающему открыт доступ к отдельным браузерным приложениям, позволяющим с помощью алгоритмов GrooVAE подобрать барабанную партию к заданной другим инструментом музыкальной партитуре.