Сбер научил виртуальных ассистентов «Салют» сочинять музыку

Ассистентов «Салют» научили создавать музыку по вымышленному названию артиста и произведения. Попробовать сервис можно в мобильных приложениях «Салют» и Сбербанк Онлайн.

Команда SberDevices разработала сервис «Маэстро» на базе нейросетей CLаMP и ранее представленной SymFormer.

Музыкальные композиции создаются в несколько этапов. Сначала пользователь вводит текстовый запрос с вымышленными названиями артиста и композиции. Затем модель CLaMP обрабатывает полученные данные, конвертирует их в понятный для генератора мелодий язык и направляет в SymFormer. На последнем этапе созданную SymFormer композицию озвучивают виртуальные инструменты.

Сгенерированные мелодии можно добавлять в свою медиатеку внутри навыка и прослушивать в любое время. Можно также послушать треки, сгенерированные другими пользователями по похожим запросам, и оценить их.