vocal remover

вокал

Это инструмент на основе глубокого обучения для извлечения инструментального трека из ваших песен.

Установка

Получение вокала

Загрузите последнюю версию отсюда.

Установите Pytorch

Смотрите : начните

Установите другие пакеты

 cd vocal-remover
pip install -r requirements.txt

Использование

Следующая команда разделяет ввод на инструментальные и вокальные треки. Они сохраняются как *_Instruments.wav и *_Vocals.wav .

Беги на процессоре

 python inference.py --input path/to/an/audio/file

Беги на GPU

 python inference.py --input path/to/an/audio/file --gpu 0

Расширенные варианты

--tta Option выполняет тестовое время-авгумент, чтобы улучшить качество разделения.

 python inference.py --input path/to/an/audio/file --tta --gpu 0

--postprocess опция маскирует инструментальную часть на основе тома вокала, чтобы улучшить качество разделения.

Предупреждение

Это экспериментальная особенность. Если у вас есть какие -либо проблемы с этой опцией, отключите его.

 python inference.py --input path/to/an/audio/file --postprocess --gpu 0

Тренируйте свою собственную модель

Поместите свой набор данных

 path/to/dataset/
  +- instruments/
  |    +- 01_foo_inst.wav
  |    +- 02_bar_inst.mp3
  |    +- ...
  +- mixtures/
       +- 01_foo_mix.wav
       +- 02_bar_mix.mp3
       +- ...

Тренировать модель

 python train.py --dataset path/to/dataset --mixup_rate 0.5 --reduction_rate 0.5 --gpu 0

Ссылки

• [1] Jansson et al., «Поет голосовой разделение с глубокими сверточными сетями U-Net», https://ejhumphrey.com/assets/pdf/jansson2017sing.pdf
• [2] Takahashi et al., «Многомасштабные многополосные денсеноты для разделения источника аудио», https://arxiv.org/pdf/1706.09588.pdf
• [3] Такахаши и др.
• [4] Choi et al., «Повышение речи с фазой с глубоким сложным U-Net», https://openreview.net/pdf?id=skertsacym
• [5] Jansson et al., «Учившиеся сложные маски для разделения источника с несколькими инструментами», https://arxiv.org/pdf/2103.12864.pdf
• [6] Liutkus et al., «Кампания оценки сигналов 2016 года», Анализ латентных переменных и разделение сигналов - 12 -я Международная конференция