Уменьшите фоновый шум и оптимизируйте речь из аудиоклипа с помощью ffmpeg

видео нет достойной аудио фильтров для шумоподавления встроенная. Audacity имеет довольно эффективный фильтр NR, но он предназначен для использования с 2-х проходной операцией с выборкой только шума, а затем ввода.

комментарии в верхней частиhttps://github.com/audacity/audacity/blob/master/src/effects/NoiseReduction.cpp объясните, как это работает. (в основном: подавите каждую ячейку FFT, которая ниже порога. Так он только препятствует сигналам до конца когда они громче, чем уровень шума в этой полосе частот. Он может делать удивительные вещи, не вызывая проблем. Это как полосовой фильтр, который адаптируется к сигналу. Так как энергия шума распространяется по всему спектру, только пропуская через несколько узких полос, он уменьшит общую энергию шума много.

см. также уменьшение шума аудио: как audacity по сравнению с другими вариантами? для получения более подробной информации о том, как это работает, и что пороговых БПФ бункеров в так или иначе, это основа и типичных коммерческих шумоподавляющих фильтров.

перенос фильтра с ffmpeg бы немного неловко. Возможно, лучше всего было бы реализовать его как фильтр с 2 входами, а не 2-полосный фильтр. Поскольку для получения профиля шума требуется всего несколько секунд, он не должен читать весь файл. И вы не должны кормить его весь звуковой поток в качестве образца шума, так или иначе. Он должен видеть образец только шума, чтобы установить пороги для каждого ящика FFT.

Так что да, 2-й вход, а не 2pass, будет иметь смысл. Но это делает его намного менее удобным в использовании, чем большинство простых фильтров. Вам понадобится куча вуду с разделением потока / извлечением временного диапазона. И, конечно, вам нужно ручное вмешательство, если у вас нет образца шума в отдельном файле, который будет подходит для нескольких входных файлов. (один образец шума от того же микрофона / установки должно быть хорошо для всех клипов из этой установки.)