UnityTTS

Texto a discurso en la unidad

¡Importante! El modelo actual (FastSpeech) no funciona bien con frases cortas. (por ejemplo, "hola", "cómo estás", etc.)

¡Este paquete proporciona un texto de plataforma cruzada completamente funcional al motor del habla utilizando modelos de aprendizaje profundo integrados en la unidad con C#!

Puede encontrar el repositorio de ejemplo aquí.

• Texto a discurso en la unidad
  • Texto a discurso
  • Instalación
  • ¡Apoya el proyecto!
  • ¡Únete a la comunidad!
  • Licencia
  • Referencias

Texto a discurso

El modelo que usamos para TTS es FastSpeech. El modelo TFLite que utilizamos se convierte de un modelo previamente capacitado que se encuentra en el repositorio de TensorFlowTts.

Para evitar que la unidad se congele al inferir el modelo TFLite, ejecutamos el proceso de inferencia en un nuevo hilo y reproducimos el audio en el hilo principal una vez que esté listo.

Instalación

Dependencias externas:

• voxell.util (Unityutil)
• com.github.asus4.tflite (UnityTflite)

1. Clonar el repositorio de UnityUtil en su carpeta Packages .
2. Agregue el paquete TFLite a través de la selección "Agregar paquete de Git URL" en el Administrador de paquetes usando este enlace: https://github.com/asus4/tf-lite-unity-sample.git?path=/packages/com.github.asus4.tflite
3. Clonar este repositorio en su carpeta Packages .
4. Descargue los modelos TFLITE de Google Drive e importe a Unity (colóquelos dentro de la carpeta de Assets/StreamingAssets ).
5. ¡Y estás listo para ir!

¡Apoya el proyecto!

¡Únete a la comunidad!

Licencia

Este repositorio en su conjunto tiene licencia bajo la licencia pública de GNU, versión 3. Los archivos individuales pueden tener una licencia diferente pero compatible.

Consulte el archivo de licencia para obtener más detalles.

Referencias

1. Espacios rápidos
2. Melgan
3. Toda la inferencia del modelo TFLite no será posible sin la ayuda del repositorio de tflite de Unity.