Разделение барабанов на части онлайн
Разделение барабанов работает на трёх наших спектральных нейросетях (по одной на бочку, снейр и томы), обученных на 9200 записях живых барабанщиков в восьми звучаниях китов; хай-хэт и тарелки получаются как остаток — четыре части в сумме дают исходную дорожку без потерь. Обработка идёт целиком в браузере: с видеокартой (WebGPU) четырёхминутный трек раскладывается за секунды, без неё — за минуту-две. На вход — барабанная дорожка: стем из разделения песни, луп, запись электронной установки или бит; на выходе — пульт, где все четыре части звучат вместе, у каждой соло, выключение и громкость, а скачать можно отдельную часть, ZIP-архив или микс ровно таким, каким вы его слышите. Песню целиком инструмент узнаёт по самому звуку ещё до запуска: отдельная нейросеть (ей нужна видеокарта с WebGPU, скачивается один раз) достаёт из песни барабаны, три модели раскладывают их на части, а на пульте появляется пятая дорожка — музыка без барабанов; выключите ударные — и останется песня без них.
Как разделить барабаны на части
Стем ударных, луп, бит, запись установки — или песня целиком: из неё барабаны сначала достанет отдельная нейросеть. MP3, WAV, FLAC, OGG или M4A.
При первом запуске скачаются три модели; дальше они берутся из браузера. Прогресс показывается по этапам.
Четыре части играют на одних часах: у каждой соло, выключение и громкость. Так слышно, чисто ли выделилась бочка под остальным китом, а не только как она звучит отдельно.
Одна кнопка — четыре части лежат на фейдерах аудиомикшера: баланс, эквалайзер, экспорт микса.
Разложите ударные на бочку, снейр, томы и тарелки нейросетью в браузере
← Нужны вокал, бас и остальное отдельными дорожками? Разделение на стемы Свести части в микшере → Удаление барабанов из песни
Три модели этого инструмента учились на чистых барабанах: в целой песне они принимают музыку и голос за удары, и барабаны из неё так не достать. Сначала барабаны нужно отделить от песни — это делает отдельная нейросеть прямо в браузере, — а затем они раскладываются на части. Вы получите и барабаны, и песню без барабанов.
Модель (84 МБ) скачается один раз и считается на видеокарте (WebGPU). На дискретной видеокарте игрового класса трек в три-четыре минуты занимает около минуты; на встроенной графике и телефонах — заметно дольше. Оставшееся время появится, как только начнётся расчёт.
Части дорожки
Все части играют вместе, как на пульте: S — оставить одну, M — убрать, ползунок — громкость. «Скачать микс» сохранит ровно то, что слышно, — например, барабаны без бочки.
Заменить звучание барабанов
Тот же ритм — другой кит: удары бочки, снейра и томов найдены на разделённых частях и переигрываются выбранным набором. Хай-хэт и тарелки остаются оригинальными, а «Смесь с оригиналом» подмешивает исходное звучание обратно.
Загрузите по одному короткому сэмплу (до 5 с): бочка, снейр, том. Ритм и сила ударов — из вашей дорожки, звук — ваш.
Извлечение барабанов из песни — модель HTDemucs (Meta AI, лицензия MIT) в ONNX-экспорте проекта MUSION (Tianwei Zhao, CC BY 4.0). Модели бочки, снейра и томов — наши собственные: обучены на Groove MIDI Dataset (Google Magenta, CC BY 4.0), сыгранном китами FluidR3 GM и Naked Drums (Wilkinson Audio, CC BY 4.0).
