UnityTTS

Текст к речи в единстве

Важный! Текущая модель (Fastspeech) не очень хорошо работает с короткими фразами. (например, «Привет», «Как дела» и т. Д.)

Этот пакет обеспечивает полностью функциональный трансплатформный текст для речевого движения, используя модели глубокого обучения, интегрированные в Unity с C#!

Вы можете найти пример репозитория здесь.

• Текст к речи в единстве
  • Текст на речь
  • Установка
  • Поддержите проект!
  • Присоединяйтесь к сообществу!
  • Лицензия
  • Ссылки

Текст на речь

Модель, которую мы используем для TTS, - Fastspeech. Модель TFLITE, которую мы использовали, преобразуется из предварительно обученной модели, обнаруженной в репозитории TensorFlowtts.

Чтобы предотвратить замораживание Unity при выводе модели TFLITE, мы запускаем процесс вывода в новом потоке и воспроизводим звук в основном потоке, как только она будет готова.

Установка

Внешние зависимости:

• voxell.util (unityutil)
• com.github.asus4.tflite (unitytflite)

1. Клонировать репозиторий Unityutil в папку Packages .
2. Добавьте пакет TFLITE через выбор «Добавить пакет из git url» в диспетчера пакетов, используя эту ссылку: https://github.com/asus4/tf-lite-unity-sample.git?path=/packages/com.github.asus4.tflite
3. Клонируйте это хранилище в папку Packages .
4. Загрузите модели TFLITE с Google Drive и импортируйте их в Unity (поместите их в папку Assets/StreamingAssets ).
5. И вы готовы к работе!

Поддержите проект!

Присоединяйтесь к сообществу!

Лицензия

Этот репозиторий в целом лицензируется по публичной лицензии GNU, версия 3. Отдельные файлы могут иметь другую, но совместимую лицензию.

См. Файл лицензии для получения подробной информации.

Ссылки

1. Fastspeech
2. Мелган
3. Все выводы модели TFLITE не будут возможны без помощи хранилища Unity Tflite.