​🎸Принес вам список статей и ресурсов по multimodal learning для музыки. [Ссылка]

А если хотите генерировать музыку с помощью диффузионых моделей, то можете начать свое путешествие с Riffusion. Это тот же Stable Diffusion, которую зафайнтюнили на картинках аудио спектпограмм. Удивительно, но и это работает! И ее не трудно запустить локально.
[Онлайн демо]

@ai_newz