tacotron2 JP

Прежде всего, большое спасибо автору: @cjangcjengh за код и реализацию! Этот репозиторий представляет собой некоторые исправления к исходному проекту, для исправления некоторых ошибок и время от времени будет улучшен и оптимизирован.

• Ссылка: CJANGCJENGH/TACOTRON2-JAPANESE

Как использовать

1. Поместите сырые японские тексты в ./filelists
2. Поместите файлы wav в ./wav
3. (Необязательно) Скачать модель NVIDIA
4. Open ./train.ipynb для установки требований и начала обучения
5. Скачать модель волнового потока Nvidia или волнового хлопка на основе Ayachi Nene
6. Предварительно обученная модель Tacotron2 показана в этом.
7. Open ./inference.ipynb для генерации голоса (пожалуйста, не забудьте изменить соответствующий путь, в котором хранится модель ！！)

• Inference.ipynb

 checkpoint_path = 'tacotron2_Model \ ayachi_nene_1' #"ayachi_nene_1"
model = load_model ( hparams )

if torch . cuda . is_available () :
    model . load_state_dict ( torch . load ( checkpoint_path )[ 'state_dict' ])
    model . to ( device ). eval ()
else :
    model . load_state_dict ( torch . load ( checkpoint_path , map_location = 'cpu' )[ 'state_dict' ])
    model . to ( device ). eval ()

• Inference.ipynb

 waveglow_path = 'W_Model \ model' #waveglow model
if hparams . cuda_enabled :
    waveglow = torch . load ( waveglow_path )[ 'model' ]
    waveglow . cuda (). eval () #.half()
else :
    waveglow = torch . load ( waveglow_path , map_location = 'cpu' )[ 'model' ]
    waveglow . to ( device ). eval () #.half()


for k in waveglow . convinv :
    k . float ()
denoiser = Denoiser ( waveglow )

Чистящие средства

Файл ./hparams.py Line 30

1.

До

何かあったらいつでも話して下さい。学院のことじゃなく、私事に関することでも何でも

После

Nanikaacltaraitsudemohanashitekudasai.gakuinnokotojanaku, Shijinikansurukotodemonanidemo.

2. 'японская_tokenization_cleaners'

До

何かあったらいつでも話して下さい。学院のことじゃなく、私事に関することでも何でも

После

Нани ка Акл Тара Иту Демо Ханаши Те Кудасаи. Gakuin no Koto Ja Naku, Shiji Nikansuru Koto de Mo Nandemo.

3.

До

何かあったらいつでも話して下さい。学院のことじゃなく、私事に関することでも何でも

После

: na) ника а) cltara i) tsudemo ha (na) shite ku (dasa) I.:ga (kuinno ko (to) janaku,: shi) jini ka (nsu) ru ko (to) demo na) nidemo.

4. 'японский

До

何かあったらいつでも話して下さい。学院のことじゃなく、私事に関することでも何でも

После

Наника Аклтара Итудеми Ханашит Кудасай. Gakuinno Kotojanaku, Shijini Kansuru Kotodemo Nanidemo.

Модели

Не забудьте изменить эту линию в ./inference.ipynb

 sequence = np . array ( text_to_sequence ( text , [ 'japanese_cleaners' ]))[ None , :]

Саноба ведьма

Аячи Нене

Уборщики классы	Модель
Японский_Клианс	Модель 1
японская_tokenization_cleaners	Модель 2
Японская_акценция	Модель 3

Инаба Мегуру

Уборщики классов	Модель
японская_tokenization_cleaners	Модель 1
японская_tokenization_cleaners	Модель 2

Сенрен Банка

Томотак Йошино

Уборщики классов	Модель
японская_tokenization_cleaners	Модель 1
Японская_фрасе_Кленерс	Модель 2

Мурасам

Уборщики классы	Модель
Японская_акценция	Модель 1

Риддл Джокер

Арихара Нанами

Уборщики классов	Модель
Японская_акценция	Модель 1