Stem Separation: как ИИ разделяет музыку на части (2026)

Если ты когда-нибудь использовал ИИ-инструмент для удаления вокала или выделения барабанов из песни, ты уже сталкивался с разделением стемов. Но как это работает на самом деле? Почему на одних треках звучит отлично, а на других оставляет очевидные артефакты? И что происходит внутри этих моделей, из-за чего они становятся лучше с каждым годом?

В этой статье — полная картина: наука, практические ограничения и то, чего реально ожидать, когда загружаешь песню в разделитель стемов в 2026 году.

Что такое Stem Separation?

Разделение стемов (также называемое разделением источников звука, audio demixing или music unmixing) — это вычислительный процесс разложения смешанной аудиозаписи на отдельные компоненты. Типичная поп-песня, которая приходит к тебе как один стереофайл, содержит всё, записанное вместе: ведущий вокал, бэки, бочку, малый барабан, бас-гитару, гитары, клавиши и всё, что продюсер добавил поверх. Разделение стемов пытается математически обратить этот процесс сведения.

Слово «стем» пришло из терминологии музыкального производства. В студии звукозаписи стем — это субмикс: один аудиофайл, содержащий группу связанных инструментов, сведённых вместе. Продюсер может экспортировать «стем барабанов» со всеми барабанными треками, «стем вокала» со всеми вокальными слоями и так далее. Эти стемы упрощают передачу проекта мастеринг-инженеру или в синхронизационную компанию без раскрытия каждого отдельного трека.

Современные ИИ-разделители стемов производят точно такие же выходные файлы — только работают в обратном направлении, от финального стереомикса, а не от оригинального мультитрека. Подробнее о том, что можно делать с разделёнными стемами, смотри в нашем гайде по ИИ-разделителям стемов.

Четыре стандартных стема, на которые ориентируется большинство инструментов:

• Вокал — ведущий вокал, бэк-вокал, гармонии и любое произносимое слово
• Барабаны — полный барабанный сет: бочка, малый, томы, хай-хет, тарелки и перкуссия
• Бас — бас-гитара, синт-бас и низкочастотные тональные инструменты
• Остальное — всё, что не входит в вышеперечисленное: гитары, клавиши, синтезаторы, струнные, медные, эффекты

Более продвинутые 6-стемные модели добавляют Гитару и Пианино как отдельные выходные треки, хотя их надёжная изоляция сложнее — гитары и клавишные перекрываются по частотному диапазону с многими другими инструментами.

Почему старые методы не работали

Чтобы оценить, насколько впечатляет современное ИИ-разделение, полезно понять, что было раньше.

Фазовая отмена (1960-е–2010-е)

Старейший трюк — фазовая отмена. Если взять стереофайл, инвертировать один канал, а затем свести в моно, всё, что идентично в обоих каналах, взаимно уничтожается. Во многих поп-миксах ведущий вокал записывался в моно и ставился по центру — то есть появлялся идентично в левом и правом каналах. Инверсия и суммирование убирали его.

Очевидная проблема: всё, что стоит по центру, убирается вместе с вокалом. Обычно это включало бочку, бас-гитару, малый и другие центральные элементы. «Инструментал», который ты получал, был выхолощен. А если на вокале были стереоэффекты (реверб, хорус), эти части переживали отмену и оставляли призрачные артефакты. Именно поэтому старые «удалители вокала» так ужасно звучали.

Частотная фильтрация

Более грубый подход: срезать частотные полосы, наиболее связанные с человеческим голосом (примерно от 200 Гц до 3 кГц). Это повреждало весь микс, потому что гитары, пианино и барабаны занимают те же частоты. Вокал заглушался лишь частично, а всё остальное разрушалось в процессе.

Спектральное редактирование

Ручное спектральное редактирование в таком инструменте, как iZotope RX, позволяет опытному инженеру вручную закрасить вокальные компоненты в спектрограмме и заменить их тишиной или заполнением из шума. Это может работать удивительно хорошо на коротких участках — убрать скрип двери или короткую разговорную фразу. Но для целой песни это занимает часы экспертной работы, и результаты всё равно показывают очевидные швы.

Ни один из этих подходов не мог создавать чистые разделённые стемы полной длины. ИИ изменил это полностью.

Как работает современное ИИ-разделение стемов

Современные системы — это глубокие нейронные сети, обученные распознавать спектральные и временные паттерны, отличающие один источник звука от другого в миксе.

Шаг 1: Преобразование аудио в спектрограмму

Сырое аудио — это форма волны: временной ряд значений давления, сэмплируемый тысячи раз в секунду. Но нейронные сети лучше работают с двумерным представлением, которое показывает, как частотное содержимое сигнала меняется со временем. Стандартный инструмент для этого преобразования — Short-Time Fourier Transform (STFT), который создаёт спектрограмму: сетку, где горизонтальная ось — это время, вертикальная ось — частота, а яркость (или цвет) в каждой точке представляет громкость этой частоты в данный момент.

Можно думать о ней как о пиано-ролле, но вместо дискретных нот она показывает полный непрерывный частотный спектр всего, что звучит одновременно. Удар малого выглядит иначе, чем гитарный аккорд, который выглядит иначе, чем длинная вокальная нота — и все они отличаются от бас-гитары. Спектрограмма делает эти различия видимыми.

Шаг 2: Что нейронная сеть на самом деле учится делать

Модель обучается на датасете песен, для которых изолированные стемы уже известны — по сути, она учится на тысячах мультитрековых записей, «сведённых» в программном обеспечении. Для каждого обучающего примера модель видит спектрограмму смешанной песни вместе со спектрограммами каждого отдельного стема.

В процессе обучения сеть учится, что определённые спектральные формы, текстуры и паттерны движения ассоциируются с вокалом, барабанами или басом. Она узнаёт, что низкочастотные составляющие баса склонны иметь длинные, плавные тянущиеся ноты. Что барабаны создают острые вертикальные линии (транзиенты) по многим частотам одновременно. Что вокал имеет характерные формантные структуры — резонансные частотные паттерны, специфичные для человеческого голоса, которые меняются при изменении гласных.

Наиболее мощные современные архитектуры, такие как Hybrid Transformer Demucs (HTDemucs), обрабатывают аудиосигнал в двух параллельных потоках одновременно:

• Поток во временной области, который работает напрямую с сырой формой волны и особенно хорошо справляется с транзиентами, таймингом и фазовыми соотношениями
• Поток в частотной области, который работает со спектрограммой и отлично идентифицирует тональное содержимое, гармоники и спектральную текстуру

Механизм Transformer-внимания позволяет информации перетекать между этими двумя потоками, давая модели возможность объединять то, что она изучает из каждого. Именно этот двойной подход делает HTDemucs лучше ранних моделей, использовавших только одно представление.

Шаг 3: Оценка маски

Вместо непосредственного предсказания выходной формы волны для каждого стема большинство архитектур работают через оценку маски — сетки того же размера, что и входная спектрограмма, где каждая ячейка содержит значение от 0 до 1, представляющее, какая часть этой частоты в данный момент времени принадлежит конкретному стему.

Применяешь маску барабанов к исходной спектрограмме — и подавляешь всё, что не похоже на барабаны. Применяешь маску вокала — и подавляешь всё, что не похоже на вокал. Мягкое маскирование (где значения дробные, а не бинарные 0/1) сохраняет больше качества звука, чем жёсткие срезы — поэтому оно стало стандартом.

Шаг 4: Обратное преобразование в аудио

После вычисления замаскированных спектрограмм для каждого стема финальный шаг — преобразование их обратно в аудио с помощью обратного STFT. Результат — набор аудиофайлов, по одному на стем, которые вместе должны приблизительно воссоздавать оригинальный смешанный трек при суммировании.

Разница в качестве, которую ты слышишь между инструментами, обычно определяется: объёмом использованных обучающих данных, размером и сложностью архитектуры модели, а также тем, сохраняет ли стратегия маскирования тонкие детали — хвосты реверба и атакующие транзиенты.

Сравнение основных ИИ-моделей

Несколько open-source моделей определяют состояние индустрии с 2019 года. Понимание их различий помогает объяснить, почему разные инструменты звучат так, как звучат. Все значения SDR ниже приведены для стема вокала на бенчмарке MUSDB18 — стандартном тестовом наборе, используемом в исследовательском сообществе.

Быстрое сравнение

Spleeter (Deezer, 2019)

Spleeter был первой широкодоступной open-source моделью для разделения стемов и произвёл огромное влияние — внезапно каждый мог запустить разделение приемлемого качества на своём собственном компьютере. Он использует архитектуру U-Net (энкодер-декодер со skip-соединениями), работающую исключительно в частотной области.

Сильные стороны: Быстрый, лёгкий, работает на скромном железе, легко разворачивается, всё ещё достаточен для базового использования в караоке.
Слабые стороны: Просачивание хорошо слышно на многих треках, плохо справляется с реверб-тяжёлым вокалом, качество режима 5 стемов заметно падает по сравнению с 2 стемами.
Vocals SDR: ~6,5 dB на MUSDB18.

Для прямого сравнения Spleeter и Demucs по жанрам с таблицами SDR смотри наш разбор Spleeter vs Demucs.

Demucs v3 (Meta/Facebook, 2021)

Demucs v3 ввёл обработку во временной области наряду с частотной и стал значительным шагом вперёд по сравнению с Spleeter. Он обрабатывает сырую форму волны напрямую, используя энкодер-декодерную сеть с gated-свёртками, что обеспечивает лучшую фазовую когерентность и чёткие транзиенты — особенно заметно на стемах барабанов и баса, где важен тайминг.

Сильные стороны: Более чистые транзиенты, чем у Spleeter, лучшая фазовая когерентность, хорошие результаты на CPU без GPU.
Слабые стороны: Медленнее Spleeter, не выигрывает от контекстного моделирования Transformer, HTDemucs даёт лучшие результаты при аналогичных вычислительных затратах.
Vocals SDR: ~7,3 dB на MUSDB18.

HTDemucs (Meta/Facebook, 2022)

Нынешний мейнстримный стандарт. HTDemucs добавляет механизм Transformer-внимания, который позволяет модели рассуждать о более длинных временных контекстах — понимать, что нота баса в такте 1 скорее всего связана с нотой баса в такте 3, а не меняется случайно. Это моделирование долгосрочных зависимостей позволяет лучше справляться со сложной гармонической музыкой по сравнению с более ранними моделями только на свёртках.

Сильные стороны: Лучшее общее качество по всем четырём стемам, хорошо справляется с плотными миксами, более чистые хвосты реверба, лучшее разделение баса, доступен как бесплатный open-source через GitHub Demucs.
Слабые стороны: Медленнее Spleeter, требует больше вычислений, иногда низкочастотное просачивание на очень плотных миксах.
Vocals SDR: ~8,7 dB на MUSDB18 — примерно на 35% выше качество по сравнению со Spleeter по стандартной метрике.

HTDemucs Fine-Tuned (htdemucs_ft) — версия, дополнительно обученная на небольшом кюрированном датасете. На средних треках она работает аналогично базовому HTDemucs, но на определённых жанрах (особенно поп и R&B) даёт заметно более чистые результаты. StemSplit запускает htdemucs_ft для всех задач по умолчанию. HTDemucs 6s (htdemucs_6s) добавляет гитару и пианино как отдельные выходные треки — полезно для продакшена, хотя точность на этих дополнительных стемах ниже, чем у стандартных четырёх.

MDX-Net (Music Demixing Challenge, 2021)

Модели MDX-Net появились из Sound Demixing Challenge и используют ансамблевые подходы — комбинируя несколько моделей, выходы которых усредняются. Вариант mdx_extra был обучен на дополнительных данных сверх стандартного бенчмаркового набора.

Сильные стороны: Конкурирует или слегка превосходит HTDemucs конкретно по изоляции вокала; полезен, когда качество вокала — единственный приоритет.
Слабые стороны: Отстаёт от HTDemucs по барабанам и басу; медленнее из-за ансамблевых вычислений; менее универсален.
Vocals SDR: ~9,0 dB на MUSDB18 для mdx_extra — сильный по вокалу, слабее по другим стемам.

На практике разница между htdemucs_ft и mdx_extra на реальной музыке меньше, чем показывают цифры бенчмарков. Какой «лучше», часто зависит от конкретного жанра и характеристик микса.

BS-RoFormer (2024) — современное состояние индустрии

Новейшее поколение. BS-RoFormer (Band-Split RoFormer) применяет Roformer (вариант Transformer с вращательными позиционными эмбеддингами) к представлению сигнала с разбивкой по полосам, где аудиоспектр делится на субполосы, и каждая обрабатывается выделенными головами внимания. Эта архитектура позволяет модели рассуждать одновременно о тонких деталях частот и долгосрочной временной структуре.

Сильные стороны: Лучший Vocals SDR среди всех опубликованных моделей по состоянию на 2026 год, значительно снижает металлические артефакты, характерные для старых моделей, исключительно хорошо справляется с реверб-тяжёлым вокалом.
Слабые стороны: Вычислительно затратен, ещё не так широко используется, как HTDemucs, требует более новой инфраструктуры для эффективной работы.
Vocals SDR: ~10,9 dB на MUSDB18 — значительное улучшение над HTDemucs, особенно заметное на сложном материале.

BS-RoFormer начинает появляться в коммерческих инструментах и представляет собой направление, в котором движется индустрия.

Как на самом деле звучит качество разделения

Числа SDR полезны для объективного сравнения моделей, но не говорят о том, как артефакты звучат на практике. Вот чего ожидать.

Проблема просачивания

Ни одна ИИ-модель не производит идеально изолированных стемов. Некоторый сигнал из соседних источников всегда «просачивается» в каждый выходной трек. На изолированном вокальном треке ты обычно услышишь слабый призрак того, что звучало громче всего в миксе — часто бочку или малый. На инструментальном треке — слабую, слегка обработанную тень вокала.

Просачивание обычно достаточно тонкое, чтобы не разрушить цель использования. В случае с караоке шёпот вокального артефакта под инструменталом гораздо менее заметен, чем оригинальный полный голос. При сэмплировании барабанных брейков след баса под барабанным треком обычно неслышим в контексте.

Просачивание становится реальной проблемой в профессиональных рабочих процессах сведения — если ты пытаешься ремиксировать коммерческий трек и нужны действительно чистые стемы для клубного релиза, ИИ-разделение обычно недостаточно чистое без дополнительной ручной обработки в iZotope RX или аналогичных инструментах.

Хвосты реверба и транзиенты

Хвосты реверба — одна из самых сложных вещей для ИИ-моделей. Когда вокалист поёт длинную фразу с тяжёлым ревербом, хвост реверба выходит за пределы вокала и размазывается в спектрограмме так, что его сложно однозначно отнести к вокалу или фону. Современные модели справляются с этим неплохо, но ты часто будешь слышать, что реверб ведёт себя немного иначе на разделённом стеме, чем в оригинальном миксе.

Транзиенты — острые атаки барабанов, гитарных медиаторов и клавиш пианино — сейчас обрабатываются намного лучше, чем в моделях, работавших только в частотной области. Поток HTDemucs во временной области сохраняет детали атаки достаточно хорошо, чтобы разделённые барабанные треки звучали пробивно и естественно.

Жанр имеет значение

Качество разделения существенно варьируется в зависимости от жанра:

Студийный поп и электронная музыка разделяются лучше всего, потому что современный продакшн уже держит инструменты в относительно разграниченных частотных зонах. Джаз и классика сложнее всего — всё глубоко гармонически переплетено и записано с натуральной акустикой помещений.

Когда ИИ-разделение не справляется (и почему)

Понимание режимов отказа помогает предсказать, когда получишь хорошие результаты, а когда нет.

Гетерофония и дублирование

Когда два инструмента играют одну и ту же ноту одновременно — вокал, удвоенный октавной партией пианино, или гитара в унисон с клавишными — модель часто не может решить, в какой стем это поместить. Задвоенная часть либо делится между двумя выходами, либо полностью присваивается неправильному стему.

Экстремальная обработка эффектами

Сильная вокальная дисторшн (например, агрессивный автотюн, питч-шифтинг или вокодер) сбивает с толку модели, которые научились распознавать натуральные формантные паттерны человеческого голоса. Эффект «роботизированного голоса», изменяющий спектральный характер вокала, может привести к тому, что он просачивается в стем «Остальное» вместо чистой изоляции.

Аналогично, экстремальные гитарные эффекты — фузз-педали и октавные эффекты — достаточно меняют спектральный отпечаток гитары, чтобы модель могла неверно классифицировать её часть.

Путаница с низкими частотами

Субчастоты ниже примерно 80 Гц сложно разделить, потому что всё в этом диапазоне — бас-гитара, бочка, синт-бас — сливается в рокочущую массу в спектрограмме. Особенно проблематичны 808-стайл бочки, которые уходят вниз в суббас, поскольку они перекрываются по спектру с басовыми партиями. Ты часто будешь слышать, что 808 просачивается в оба выходных стема — и барабанов, и баса.

Низкокачественные исходные файлы

Прогнать 128kbps MP3 через разделитель стемов не просто даст выходные треки более низкого качества — это активно вносит артефакты, потому что алгоритм сжатия MP3 уже отбросил аудиоинформацию и добавил звенящие артефакты. Модель может интерпретировать эти артефакты как инструментальный сигнал. Для лучших результатов используй 320kbps MP3 или файлы без потерь (WAV, FLAC).

Практические сценарии использования и чего ожидать

Создание треков для караоке

Это самый массовый сценарий использования, и именно здесь ИИ-разделение работает лучше всего на практике. Чистая, современная студийная запись, разделённая с HTDemucs, даст тебе инструментальный трек, где просачивание вокала достаточно тонкое, чтобы не отвлекать. Лёгкий срез низких частот и многополосная компрессия на выходном инструментале улучшают результаты. Смотри наш обзор лучших инструментов для удаления вокала для сравнения сервисов.

Инструмент для удаления вокала StemSplit запускает htdemucs_ft, специально оптимизируя его для этого сценария.

Музыкальная практика и обучение

Изоляция стемов для практики — ещё одно отличное применение технологии. Убрать гитару из записи, чтобы играть под неё, или извлечь только партию пианино, чтобы выучить её на слух, хорошо работает с современными моделями. Лёгкое просачивание других инструментов не мешает изучению партии. Изолированный стем можно также использовать, чтобы услышать тонкие детали техники музыканта, которые теряются в полном миксе.

Диджейские мэшапы и живые выступления

Диджеи используют разделённые a cappella и инструменталы для мэшапов и живого стем-миксинга. Требования к качеству здесь мягче, чем в студийном продакшне — в клубной обстановке с громкой звуковой системой просачивание вокала на низком уровне неслышимо. Такие артисты, как Girl Talk, строили целые карьеры на грубых комбинациях вокал-над-инструменталом, с гораздо более низким качеством, чем современный ИИ производит.

Продакшн и сэмплирование

Именно здесь ИИ-разделение натыкается на реальные ограничения. Если ты используешь изолированные барабаны или бас в новом треке, тебе нужно будет почистить стемы в iZotope RX или аналогичном инструменте, прежде чем они будут готовы к релизу. Для сэмпл-бейзд хип-хоп продакшна стем барабанов из ИИ-разделения обычно пригоден после хай-пасс фильтра и EQ для удаления просачивания баса.

Для коммерческих релизов, строго требующих чистых сэмплов, одного ИИ-разделения обычно недостаточно — нужна оригинальная мультитрековая сессия.

Как получить лучшие результаты

Используй исходный файл наивысшего доступного качества

Без потерь лучше, чем MP3. 320kbps MP3 значительно лучше, чем 128kbps. Если у тебя есть версия FLAC или WAV, всегда используй её. Файлы с низким битрейтом вносят артефакты сжатия, которые модель может принять за инструментальный сигнал, ухудшая каждый выходной стем.

Избегай живых записей и бутлегов

Студийные записи всегда разделяются чище, потому что микс был контролируемым. Живые записи содержат натуральную акустику зала, шум толпы и просачивание с микрофонов сцены, которые сбивают с толку модель. Даже отличная живая запись даст заметно худшие стемы, чем средняя студийная запись той же песни.

Тестируй короткий фрагмент перед обработкой целого трека

Прежде чем обрабатывать полный 5-минутный трек, загрузи 30-секундный фрагмент наиболее сложной части (обычно хорус), чтобы проверить, достаточно ли качество. Если выходной трек проблематичен на хорусе, в других местах лучше не станет. Это особенно полезно, когда не уверен, хорошо ли разделится конкретный жанр или стиль производства.

Пост-обрабатывай результат

Лёгкий хай-пасс фильтр (около 80–100 Гц) на разделённых вокальных стемах убирает суббасовый гул от просачивания. Транзиентный шейпер может восстановить панч, если стем барабанов звучит немного мягко. Многополосная компрессия помогает подтянуть инструментал с периодическим вокальным призраком. Эти правки обычно занимают меньше двух минут и заметно улучшают пригодность результата.

Откалибруй свои ожидания

ИИ-разделение в 2026 году действительно впечатляет — далеко за пределами того, что было возможно даже четыре года назад. Это не магия. Понимание того, что оно может и не может делать, помогает использовать его эффективно, а не удивляться его ограничениям. Если хочешь запустить его локально на своём компьютере, наш гайд по настройке Demucs проведёт тебя через полный процесс установки. Если предпочитаешь онлайн-вариант без настройки, наш онлайн-туториал Demucs охватывает этот рабочий процесс.

Попробуй сам

Лучший способ понять разделение стемов — прогнать несколько треков и внимательно послушать. Разделитель стемов StemSplit запускает htdemucs_ft на серверах с GPU и обрабатывает треки меньше чем за две минуты. Загрузи любую песню и получи 30-секундный превью перед подтверждением — аккаунт не нужен.

Разделить песню бесплатно →

---

FAQ

Идеально ли ИИ-разделение стемов?

Нет. Современные модели дают очень хорошие результаты — большинство пользователей находят выходной трек полезным для своих целей — но всегда есть некоторое просачивание из соседних инструментов. Разница в качестве между моделями 2022 и 2026 годов значительна, и улучшение продолжается. BS-RoFormer представляет текущий потолок; будущие архитектуры поднимут его выше.

В чём разница между разделением стемов и удалением вокала?

Удаление вокала — это конкретное применение разделения стемов, сфокусированное на разделении вокала и инструментала. Разделение стемов — это более широкий процесс декомпозиции микса на любое количество компонентов (вокал, барабаны, бас, другие инструменты). Все инструменты удаления вокала используют разделение стемов, но не все разделители стемов используются для удаления вокала.

Как это сравнивается с наличием оригинальных стемов из студии?

Оригинальные студийные стемы всегда лучше — они имеют идеальную изоляцию, потому что никакого сведения не происходило. ИИ-разделённые стемы будут иметь некоторое остаточное просачивание, которого нет у оригинальных стемов. Для профессионального продакшена оригинальные стемы предпочтительны, когда они доступны. Для всего остального ИИ-разделение — практическая альтернатива.

Какую модель использовать?

Для большинства задач: htdemucs_ft. Он даёт лучшее общее качество по всем четырём стемам. Используй htdemucs_6s, если тебе конкретно нужны гитара и пианино разделёнными. Используй mdx_extra, если качество изоляции вокала — твой единственный приоритет и ты готов принять худший вывод барабанов/баса. Spleeter стоит рассматривать только если обрабатываешь очень большой объём и скорость важнее качества.

В каком формате загружать для лучших результатов?

WAV или FLAC (без потерь) даёт лучшие результаты. Высококачественный MP3 (320kbps) почти так же хорош. Избегай низкокачественных MP3 (ниже 192kbps) — артефакты сжатия ухудшают качество разделения.

Почему мой изолированный вокал всё ещё слышен под музыкой?

Это артефакт просачивания, описанный выше — фундаментальное ограничение текущих подходов на основе маскирования. Количество просачивания зависит от жанра, качества микса и используемой модели. Инструменты на основе HTDemucs минимизируют его больше, чем старые модели, но оно не исчезает полностью. BS-RoFormer снижает его ещё больше, особенно на реверб-тяжёлом вокале.

Как будет выглядеть разделение стемов через пять лет?

Траектория указывает на продолжение улучшений на сложных жанрах, лучшую обработку экстремальной эффектной обработки и, вероятно, возможность разделять отдельные элементы барабанов (бочка, малый, хай-хет) с высокой точностью. Разделение в реальном времени на потребительском железе уже становится практичным. Архитектурный сдвиг от CNN на основе маскирования к подходам на основе Transformer и диффузных генеративных моделей, вероятно, будет производить стемы, которые сложно отличить от оригинальных мультитреков на большинстве материала.