Вот проект Harmonai, который разрабатывает инструменты для генерации музыки на основе диффузионных моделей. В отличие от простых мелодических лупов, их модель, например Dance Diffusion, способна создавать полноценные и довольно сложные аудиосэмплы с нуля, просто «угадывая» и достраивая звук из шума. Это открытый и некоммерческий проект, стремящийся дать музыкантам и саунд-дизайнерам свободный доступ к передовым технологиям в области искусственного интеллекта, чтобы каждый мог экспериментировать с созданием уникальных звуков, не обладая глубокими знаниями в программировании.
Основные возможности:
- Генерация музыки с нуля — просто задаешь жанр или настроение, а нейросеть сама сочинит композицию.
- Продление существующих треков — если песня слишком короткая, можно легко нарастить её продолжительность.
- Создание лупов и семплов — идеально для битмейкеров, которым нужны свежие идеи для ритмов и мелодий.
- Разделение аудио на дорожки — помогает вытащить отдельно вокал, бас или ударные из готового микса.
- Улучшение качества старых записей — убирает шумы и артефакты, делает звучание чистым и современным.
- Сведение и мастеринг треков — автоматически выравнивает уровни, чтобы всё звучало сбалансированно и профессионально.
