AdvDCTTS

ADVDCTTS (TTS convolucional profundo adversário)

Pré -requisito

• Python 3.7
• Pytorch 1.3
• Librosa, Scipy, TQDM, Tensorboardx

Conjunto de dados

• LJ Discurso 1.1

Uso

1. Faça o download do conjunto de dados acima e modifique o caminho em config.py. E depois execute o comando abaixo. 1º ARG: Signal Prepro, 2º Arg: Metadata (Split de trem/teste)

    python prepro.py 1 1
   

2. O DCTTS tem dois modelos. Em primeiro lugar, você deve treinar o modelo Text2mel. Eu acho que o passo de 20k é suficiente (por apenas uma hora). Mas você deve treinar o modelo cada vez mais com a perda de atenção guiada.

    python train.py text2mel <gpu_id>
   

3. Em segundo lugar, treine o SSRN com Gan. As saídas do SSRN são muitos dados de alta resolução. Portanto, o treinamento do SSRN é mais lento do que o treinamento de texto2mel

    python gan_train.py <gpu_id>
   

4. Após o treinamento, você pode sintetizar algum discurso do texto.

    python synthesize.py <gpu_id>
   

5. Você também pode testar o SSRN usando os espectrogramas MEL da verdade do solo.

    python test.py <gpu_id>
   

Notas

• Você pode obter espectrogramas mais nítidos

Outros códigos

• Tensorflow DCTTS
• Pytorch DCTTS