Meta* выпустила нейросеть AudioCraft с открытым исходным кодом. С помощью ИИ можно создавать музыку и звуки.
Для работы используются три модели искусственного интеллекта. MusicGen генерирует музыку, AudioGen создаёт звуки, а EnCodec убирает артефакты из получившейся звуковой дорожки. За счёт открытого исходного кода разработчики могут улучшать нейросеть и обучать её дальше.
AudioCraft генерирует музыку не только на основе текстового запроса, но и может работать с уже существующей музыкой, а также основываться на записи с микрофона.
Прослушать готовые записи можно на сайте AudioCraft. Исходный код проекта доступен на GitHub.
*признана в России экстремистской организацией