AudioCraft – нейросеть для создания музыки от компании Meta. С ее помощью можно генерировать уникальные аудиозаписи на основе текстового описания.
ИИ модели
Нейросеть AudioCraft основана на трех моделях ИИ: MusicGen, AudioGen и EnCodec. Каждая из них отвечает за определенные функции.
MusicGen предоставляет доступ к огромной базе лицензированной музыки. Модель умеет анализировать текстовые запросы и создавать аудиозаписи, которые не будут нарушать авторские права.
MusicGen позволяет использовать при создании музыки звуки и эффекты окружающей среды. С помощью модели в аудиозапись можно добавить шум дождя, лай собаки, гул автомобилей и так далее.
EnCodec обеспечивает профессиональную обработку музыки. Модель компилирует звуки, настраивает частоты и сжимает треки в несколько раз без потери качества.
Создание музыки
Нейросеть AudioCraft доступна с открытым исходным кодом на платформе GitHub. Создать музыку можно по тому же принципу, что и в программе MusicLM. Необходимо ввести текстовый запрос, ИИ проанализирует его и сгенерирует уникальную аудиозапись.
Искусственный интеллект способен уловить такие нюансы описания, как инструментальные риффы, мелодии и настроение. Нейросеть умеет работать со звуками, записанными через микрофон. С помощью ИИ можно имитировать звучание различных музыкальных инструментов.
Особенности
- возможность создавать уникальную музыку по описанию;
- применяется нейросеть от компании Meta;
- поддерживается имитация звуков окружающей среды;
- доступен открытый исходный код;
- присутствует опция автоматического сжатия треков;
- можно редактировать аудио, записанные на микрофон;
- нейросеть используется бесплатно;
- совместима с актуальными версиями Android.
