Инструмент MusicLM – это модель для генерации музыки высокой достоверности из текстовых описаний. Модель представляет собой иерархическую задачу моделирования от последовательности к последовательности, которая генерирует музыку с частотой 24 кГц, сохраняющуюся в течение нескольких минут. Инструмент может обуславливать генерируемую музыку как текстом, так и мелодией, что позволяет ему преобразовывать насвистываемые и напеваемые мелодии в соответствии со стилем, описанным в текстовом описании. Инструмент также способен генерировать музыку из описаний картин, инструментов, жанров, уровней опыта музыкантов, мест и эпох. Кроме того, инструмент способен генерировать различные версии одной и той же текстовой подсказки и одних и тех же семантических лексем.
GitHub
