zhtts

Se recomienda usar Paddlespeech para hacer síntesis de pronunciación china

Zhtts

Chino

Una demostración de ZH/texto chino al sistema de voz se ejecuta en CPU en tiempo real. (FastSpeech2 + Mbmelgan)

RTF (Factor en tiempo real): 0.2 con CPU: Intel (R) Core (TM) i5-7200U CPU @ 2.50Ghz 24kHz Uso de audio FastSpeech2, RTF1.6 para Tacotron2

Este repositorio se basa principalmente en TensorFlowtts con poca mejora.

• El modelo tflite viene de Colab, gracias a @azraelkuan
• Agregar pausa en la puntuación
• Agregar TN (normalización de texto) de chino_text_normalization

WAV de demostración

Text = "En 2020, este es un sistema de síntesis de voz chino de extremo a extremo de código abierto"

síntesis de zhtts mp3

Instalar

 pip install zhtts

o clonar este repositorio, luego pip install .

Uso

 import zhtts

text = "2020年，这是一个开源的端到端中文语音合成系统"
tts = zhtts . TTS () # use fastspeech2 by default

tts . text2wav ( text , "demo.wav" )
> >> Save wav to demo . wav

tts . frontend ( text )
> >> ( '二零二零年，这是一个开源的端到端中文语音合成系统' , 'sil ^ er4 #0 l ing2 #0 ^ er4 #0 l ing2 #0 n ian2 #0 #3 zh e4 #0 sh iii4 #0 ^ i2 #0 g e4 #0 k ai1 #0 ^ van2 #0 d e5 #0 d uan1 #0 d ao4 #0 d uan1 #0 zh ong1 #0 ^ uen2 #0 ^ v3 #0 ^ in1 #0 h e2 #0 ch eng2 #0 x i4 #0 t ong3 sil' )

tts . synthesis ( text )
> >> array ([ 0. , 0. , 0. , ..., 0. , 0. , 0. ], dtype = float32 )

demostración de la API web

Clone este repositorio, pip install flask primero, luego

 python app.py

• Visite http: // localhost: 5000 para la interacción TTS
• ¿HTTP obtiene http: // localhost: 5000/api/tts? texto = su%20sentence para recuperar el audio WAV:

$ curl -o " helloworld.wav " " http://localhost:5000/api/tts?text=%E4%BD%A0%E5%A5%BD%E4%B8%96%E7%95%8C "

%E4%BD%A0%E5%A5%BD%E4%B8%96%E7%95%8C El código URL de "¡Hola, el mundo!"

Use Tacotron2 en lugar de FastSpeech2

WAV Generado a partir del modelo Tacotron es mejor que el discurso rápido, sin embargo, Tacotron es mucho más lento, para usar Tacotron, Cambiar Código

 import zhtts
tts = zhtts . TTS ( text2mel_name = "TACOTRON" )
# tts = zhtts.TTS(text2mel_name="FASTSPEECH2")