Нейросеть для обработки музыки: шум, эхо, мастеринг и громкость

Короткий ответ: «обработка музыки» — это пять разных задач, и путать их дорого. Чистка от шума и эха, автоматический мастеринг, реставрация старых записей, разделение на дорожки и изменение темпа с тональностью делаются разными сервисами. Нейросеть хорошо убирает ровный фон и доводит громкость до уровня площадок, но не чинит фальшивый вокал, кривой ритм и запись, сделанную в комнате с эхом.

Пять задач, которые прячутся за словами «обработка музыки»

Порядок работы почти всегда один: сначала чистка, потом правки и только в конце мастеринг. Обратный порядок означает, что вы поднимете громкость шума вместе с музыкой, а потом будете вычищать его из уже спрессованного файла.

Что вычищается из записи, а что остаётся навсегда

• Убирается почти полностью: ровный гул, шипение плёнки, шум кондиционера, сетевая наводка, щелчки и клики, дыхание между фразами.
• Убирается частично: эхо комнаты, ветер в микрофоне, перегруз на пиках. Цена всегда одна — звук становится глуше, потому что вместе с помехой уходит часть верхних частот.
• Не убирается: посторонний голос поверх музыки, музыка из соседнего помещения, гудок и сирена в момент вокальной фразы, полностью срезанный перегрузом кусок волны.

Практическое правило: чистка вытягивает запись на одну ступень, а не на три. Если в исходнике речь и музыка на грани разборчивости, после обработки получится разборчиво, но глухо. Записать заново почти всегда дешевле по времени, чем спасать безнадёжное.

Что делает автоматический мастеринг и чего от него ждать не стоит

1. Выравнивает общую громкость до уровня, принятого на площадках, и убирает разброс между треками одного альбома.
2. Правит частотный баланс: подрезает бубнящую середину, добавляет воздуха сверху, чистит низ от лишнего.
3. Работает со стереокартиной, расширяя её и оставляя низ в центре.
4. Ограничивает пики, чтобы трек не искажался на громкой системе.
5. Даёт варианты обработки на выбор, обычно от осторожного до агрессивного. Слушать их надо на телефоне и в наушниках, решения на слух отличаются сильно.

Чего он не делает: не спасает сведение. Если в исходнике вокал тонет в аранжировке, мастеринг сделает громче ровно ту же кашу. Разбирать баланс инструментов надо до него, на отдельных дорожках.

До какой громкости сводить: ориентиры по площадкам

Смысл ориентиров в том, что площадки нормализуют громкость сами. Пережатый до предела трек они приглушают, и он звучит плоско рядом с аккуратно сведённым. Гонка за максимальной громкостью проиграна ещё до загрузки файла.

Реставрация старых записей: что вытягивается из кассеты и диктофона

• Вытягивается хорошо: шипение плёнки, щелчки винила, ровный фон, глухая середина, слабая громкость.
• Вытягивается частично: обрезанные верхние частоты. Сервисы их достраивают, но именно достраивают: детали в записи не появляются, они придумываются моделью.
• Не вытягивается: плавание скорости у растянутой кассеты, выпадения сигнала, запись, сделанная поверх другой.

Порядок для семейного архива простой: сначала оцифровать в максимальном качестве и сохранить исходник нетронутым, потом обрабатывать копию. Исходник переписать нельзя, а обработку можно повторить через год на сервисе, который будет работать лучше.

Изменение темпа и тональности без искажения голоса

Современные алгоритмы двигают высоту и скорость по отдельности, и в разумных пределах это незаметно. Пределы такие: примерно до двух полутонов по высоте и до 10 процентов по темпу. Дальше вылезают артефакты — металлический призвук на вокале и «размазанные» ударные.

Типовые случаи: минусовка не в той тональности для конкретного голоса, трек не влезает в хронометраж ролика, подкаст с медленной речью. В первых двух случаях правка оправдана, в третьем лучше резать паузы, а не ускорять запись целиком.

Чего сервисы обработки не чинят никогда

1. Фальшивый вокал. Автотюн подтянет высоту, но интонация и подача останутся прежними, а звук станет искусственным.
2. Кривой ритм. Выравнивание по сетке слышно как механику, живое ощущение исчезает.
3. Слабую аранжировку. Пустой трек после мастеринга остаётся пустым, только громче.
4. Комнату с эхом. Часть эха снимается, характер помещения остаётся.
5. Дешёвый микрофон. Низ и детали, которых он не записал, взять неоткуда.
6. Клиппинг. Срезанная перегрузом волна восстанавливается приблизительно, и на громких местах это слышно.

Права: что можно делать с чужой записью, а что нельзя

• Обработка не создаёт новых прав. Вычищенная и отмастеренная чужая запись остаётся чужой.
• Для себя — можно. Восстановить домашний архив, семейную кассету, свою старую репетицию.
• Публикация ремикса или кавера требует разрешения правообладателя, и автоматические системы площадок находят исходник даже после сильной обработки.
• Работа на заказ. Перед мастерингом чужого трека стоит убедиться, что заказчик автор или правообладатель. Это одна строка в переписке, которая снимает вопросы позже.
• Загрузка в облачный сервис — это передача файла третьей стороне. Для неизданного материала клиента условия сервиса читают заранее.

Сколько стоит обработка в Беларуси и что берут на себя сервисы

Сервисы забирают рутину: чистку, громкость, типовой мастеринг под соцсети. Человек остаётся там, где нужны решения — баланс инструментов, характер звучания, спорные места в записи. Для роликов, подкастов и внутренних материалов автоматики хватает, для релиза, который слушают как музыку, обычно нет.

Куда навык работы со звуком встраивается в оплачиваемую работу

Отдельно обработка звука продаётся редко, зато она входит почти в каждый заказ на видео: ролик, где речь чистая и громкость ровная, отличается от любительского сильнее, чем картинкой. Как собирается производство роликов со звуком целиком, разбирается на странице курса для дизайнеров и видеомейкеров. Кому такой набор навыков подходит как новая специальность и что в неё входит кроме звука, показано на странице о смене профессии. Разобраться, с чего начинать именно вам, можно на бесплатном разборе на 20-30 минут.

Частые вопросы

Может ли нейросеть убрать шум из музыкальной записиРовный фон вроде гула, шипения и кондиционера убирается почти полностью, щелчки и клики тоже. Эхо комнаты снимается частично и ценой глухого звука, а посторонний голос поверх музыки не убирается вообще.

Что делает автоматический мастерингВыравнивает громкость, правит частотный баланс и стереокартину, доводит трек до уровня, принятого на площадках. Он не спасёт кривое сведение: если в исходнике вокал тонет в аранжировке, мастеринг сделает громче ровно то же самое.

До какой громкости сводить трекДля стриминга и соцсетей ориентир примерно -14 LUFS с пиками не выше -1 dBTP, для подкаста тише, около -16 LUFS. Площадки всё равно приведут громкость к своему уровню, и перегруженный мастер они просто задавят.

Можно ли обработать чужой трек нейросетью и выложить результатОбработка не создаёт новых прав на чужое произведение. Чистка записи для себя допустима, а публикация ремикса, кавера или улучшенной версии требует разрешения правообладателя.

Есть ли бесплатная обработка музыки онлайнБесплатные уровни есть почти у всех сервисов: обычно это несколько файлов в месяц, ограничение по длине и экспорт в сжатом формате. Для одной записи этого хватает, для потока задач берут подписку.