tacotron2 JP

Primeiro de tudo, muito obrigado ao autor: @cjangcjengh pela implementação de código e referência! Esse repositório é algumas correções para o projeto de origem, para corrigir alguns erros e será melhorado e otimizado de tempos em tempos.

• Referência: Cjangcjengh/Tacotron2-Japanese

Como usar

1. Coloque textos japoneses crus em ./filelistas
2. Coloque os arquivos WAV em ./wav
3. (Opcional) Baixe o modelo pré -traido da NVIDIA
4. Open ./train.ipynb para instalar requisitos e começar a treinar
5. Baixe o modelo de glow de onda ou modelo de glow de onda da NVIDIA baseado em Ayachi nene
6. O modelo Tacotron2 pré-treinado é mostrado nisso.
7. Open ./inference.ipynb para gerar voz (lembre -se de modificar o caminho correspondente em que o modelo é armazenado ！！)

• Inference.ipynb

 checkpoint_path = 'tacotron2_Model \ ayachi_nene_1' #"ayachi_nene_1"
model = load_model ( hparams )

if torch . cuda . is_available () :
    model . load_state_dict ( torch . load ( checkpoint_path )[ 'state_dict' ])
    model . to ( device ). eval ()
else :
    model . load_state_dict ( torch . load ( checkpoint_path , map_location = 'cpu' )[ 'state_dict' ])
    model . to ( device ). eval ()

• Inference.ipynb

 waveglow_path = 'W_Model \ model' #waveglow model
if hparams . cuda_enabled :
    waveglow = torch . load ( waveglow_path )[ 'model' ]
    waveglow . cuda (). eval () #.half()
else :
    waveglow = torch . load ( waveglow_path , map_location = 'cpu' )[ 'model' ]
    waveglow . to ( device ). eval () #.half()


for k in waveglow . convinv :
    k . float ()
denoiser = Denoiser ( waveglow )

Limpadores

Arquivo ./hparams.py Linha 30

1. 'Japanese_cleaners'

Antes

何かあったらいつでも話して下さい。学院のことじゃなく、私事に関することでも何でも

Depois

nanikaacltaraitsudemohanashitekudasai.gakuinnokotojanaku, shijinikansurukotodemonanidemo.

2. 'Japanese_tokenization_cleaners'

Antes

何かあったらいつでも話して下さい。学院のことじゃなく、私事に関することでも何でも

Depois

Nani Ka ACL Tara Itsu Demo Hanashi Te Kudasai. Gakuin no Koto Ja Naku, Shiji Nikansuru Koto de Mo Nandemo.

3. 'Japonês_accent_cleaners'

Antes

何かあったらいつでも話して下さい。学院のことじゃなく、私事に関することでも何でも

Depois

: na) nika a) cltara i) tsudemo ha (na) shite ku (dasa) i.:ga (kuinno ko (to) janaku ,: shi) jini ka (nsu) ru ko (to) de demonstração) nidemo.

4. 'Japanese_phrase_cleaners'

Antes

何かあったらいつでも話して下さい。学院のことじゃなく、私事に関することでも何でも

Depois

nanika acltara itsudemo hanashite kudasai. Gakuinno Kotojanaku, Shijini Kansuru Kotodemo Nanidemo.

Modelos

Lembre -se de mudar esta linha em ./inference.ipynb

 sequence = np . array ( text_to_sequence ( text , [ 'japanese_cleaners' ]))[ None , :]

Bruxa de Sanoba

Ayachi Nene

Aulas de limpeza	Modelo
Japanese_cleaners	Modelo 1
japonês_tokenization_cleaners	Modelo 2
japonês_accent_cleaners	Modelo 3

INABA MEGURU

Aulas de limpeza	Modelo
japonês_tokenization_cleaners	Modelo 1
japonês_tokenization_cleaners	Modelo 2

Senren Banka

Tomotake Yoshino

Aulas de limpeza	Modelo
japonês_tokenization_cleaners	Modelo 1
Japanese_phrase_cleaners	Modelo 2

Murasame

Aulas de limpeza	Modelo
japonês_accent_cleaners	Modelo 1

Joker de enigma

Arihara Nanami

Aulas de limpeza	Modelo
japonês_accent_cleaners	Modelo 1