ChineseTtsTflite

Cina tts tf lite

memperkenalkan

Mesin TTS yang dikembangkan menggunakan Kotlin + Jetpack Compose + TensorFlow Lite dapat digunakan sepenuhnya offline.

Dua model opsional: fastspeech dan tacotron, keduanya berasal dari TensorFlowtts

Metode teks ke pinyin berasal dari: tensorflowtts_chinese

Karena ini adalah audio output inferensi real-time, ada persyaratan tertentu untuk kinerja perangkat.

Di antara mereka, FastSpeech lebih cepat, tetapi audio yang dihasilkan lebih sedikit antropomorfik, dan dapat digunakan pada ponsel mid-range biasa atau di atas ponsel.

Tacotron memiliki persyaratan kinerja tinggi. Meskipun efek keseluruhan lebih baik, sangat lambat, sehingga saat ini memiliki nilai praktis yang kecil dan hanya untuk pengujian.

Instruksi Kompilasi Manual

1. Android Studio 2021.2.1
2. Dari alamat unduhan model berikut, unduh model-tflite.7z, dan unzip 4 file berikut ke direktori yang sesuai
3. Dari alamat unduhan AAR di bawah ini, unduh TensorFlow Lite Aar yang dipangkas, dan masukkan 2 file AAR ke dalam App/Libs

 ├─app/src/main/assets
│      baker_mapper.json
│      fastspeech2_quan.tflite
│      mb_melgan.tflite
│      tacotron2_quan.tflite

3. Kompilasi

./gradlew assembleRelease

Download model

Alamat unduhan

• Model-tf.7Z: Model TensorFlowTTS asli, umumnya digunakan di sisi PC
• model-tflite.7z: Model TFLITE yang dikonversi, umumnya digunakan dalam terminal seluler

Tampilan model

Netron

CROP Tensorflow Lite

Kurangi ukuran file biner tensorflow lite

Unduh AAR setelah pemangkasan

Perbandingan Ukuran File ARR Sebelum dan sesudah Pangkas:

• TensorFlow-lite-2.8.0.aar: 5.4MB-> 3.7MB (68.5%)
• TensorFlow-lite-select-tf-ops-2.8.0.aar: 109.6MB-> 14.8MB (13.5%)

Referensi

Tensorflowtts

Tensorflowtts_chinese

Panduan TensorFlow

Tes TF referensi

Referensi Konversi TFlite

Sumber Google Pico TTS

Tes & Konversi Model

Konversi Konfigurasi Lingkungan

• Ubuntu: 20.04 lts
• Python: 3.8

$ git clone https://github.com/TensorSpeech/TensorFlowTTS.git
$ cd TensorFlowTTS
$ pip install .
$ pip install git+https://github.com/repodiac/german_transliterate.git

DECOMPRESS MODEL-TF.7Z

Pengujian Model TF

$ cd models-tf
$ python test-h5.py

Model TF ke Tflite

$ python convert-tflite.py

Tangkapan layar antarmuka aplikasi