Google анонсировала новую модель Magenta RealTime 2 (MRT2) – инструмент для моментальной генерации музыки. В отличие от предыдущих решений, MRT2 позволяет музыкантам в реальном времени управлять стилем, смешивать аудио и играть MIDI-партии, что делает его идеальным для живых выступлений.
MRT2 поддерживает три типа управления: текстовые команды, аудиопримеры и MIDI. Это дает возможность более интерактивного взаимодействия с музыкой, благодаря снижению задержки реакции до 200 мс. Пользователи могут запустить модель на Mac с Apple Silicon, а также использовать готовые инструменты для интеграции с DAW.
Среди новых возможностей – клонирование звуков и создание аккомпанемента вживую. Модель обучалась на 71 тыс. часов музыки, ориентируясь на инструментальные композиции, хотя способна выводить вокальные звуки по специальным запросам. Однако пользователи должны сами следить за соблюдением авторских прав, так как Google не претендует на результаты, но ответственность остается на их плечах.
Следующий шаг в развитии модели включает возможности дообучения и расширение сценариев использования, что может сделать MRT2 основой для новых музыкальных инструментов и игровых саундтреков.
*компания Meta Platforms Inc. признана экстремистской организацией, ее деятельность на территории России запрещена