Meta представила новую модель искусственного интеллекта, которая создает музыку на основе текста

Корпорация Meta представила новую модель генеративного искусственного интеллекта MusicGen, которая создает музыку на основе текстового описания.

MusicGen, разработанный командой Audiocraft, может создавать 12-секундные инструментальные треки.

We present MusicGen: A simple and controllable music generation model. MusicGen can be prompted by both text and melody.
We release code (MIT) and models (CC-BY NC) for open research, reproducibility, and for the music community: https://t.co/OkYjL4xDN7 pic.twitter.com/h1l4LGzYgf

— Felix Kreuk (@FelixKreuk) June 9, 2023

По словам разработчиков, эта модель ИИ была обучена на 20 000 часов музыки из более чем 10 000 лицензированных музыкальных треков, а также на 390 000 бесплатных инструментальных треков из медиатек Pond5 и Shutterstock.

Для получения лучшего результата модель также позволяет загрузить какую-нибудь музыку в качестве примера и указать, что именно вы хотите получить. MusicGen можно бесплатно попробовать на вебсайте Hugging Face.

Ранее компания Google представила нейросеть, создающую музыку на основе текстового описания. MusicLM доступен в приложении AI Test Kitchen для мобильных устройств.