ChineseTtsTflite

tts จีน tf lite

แนะนำ

เครื่องยนต์ TTS ที่พัฒนาขึ้นโดยใช้ Kotlin + Jetpack Compose + Tensorflow Lite สามารถใช้ออฟไลน์ได้อย่างสมบูรณ์

สองรุ่นเสริม: fastspeech และ tacotron ซึ่งทั้งสองอย่างนี้มาจาก tensorflowtts

วิธีการส่งข้อความถึงพินอินมาจาก: tensorflowtts_chinese

เนื่องจากเป็นเสียงเอาต์พุตการอนุมานแบบเรียลไทม์จึงมีข้อกำหนดบางประการสำหรับประสิทธิภาพของอุปกรณ์

ในหมู่พวกเขา Fastspeech นั้นเร็วกว่า แต่เสียงที่สร้างขึ้นนั้นมีน้อยกว่ามนุษย์และสามารถใช้ในช่วงกลางหรือโทรศัพท์มือถือสูงกว่าปกติ

Tacotron มีข้อกำหนดด้านประสิทธิภาพสูง แม้ว่าเอฟเฟกต์โดยรวมจะดีกว่า แต่ก็ช้ามากดังนั้นจึงมีค่าใช้จ่ายจริงเล็กน้อยและเป็นเพียงการทดสอบเท่านั้น

คำแนะนำการรวบรวมด้วยตนเอง

1. Android Studio 2021.2.1
2. จากที่อยู่ดาวน์โหลดรุ่นต่อไปนี้ดาวน์โหลด models-tflite.7z และคลายซิป 4 ไฟล์ต่อไปนี้ไปยังไดเรกทอรีที่เกี่ยวข้อง
3. จากที่อยู่ดาวน์โหลด AAR ด้านล่างดาวน์โหลด TensorFlow Lite AAR ที่ถูกครอบตัดและใส่ไฟล์ AAR 2 ไฟล์ลงในแอพ/libs

 ├─app/src/main/assets
│      baker_mapper.json
│      fastspeech2_quan.tflite
│      mb_melgan.tflite
│      tacotron2_quan.tflite

3. การรวบรวม

./gradlew assembleRelease

ดาวน์โหลดรุ่น

ดาวน์โหลดที่อยู่

• Models-TF.7Z: รุ่น TensorFlowtts ดั้งเดิมโดยทั่วไปใช้กับ PC Side
• models-tflite.7z: รุ่น tflite ที่แปลงโดยทั่วไปใช้ในเทอร์มินัลมือถือ

มุมมองแบบจำลอง

Netron

Crop Tensorflow Lite

ลดขนาดไฟล์ไบนารี Tensorflow Lite

ดาวน์โหลด AAR หลังจากการครอบตัด

การเปรียบเทียบขนาดไฟล์ arr ก่อนและหลังการปลูกพืช:

• tensorflow-lite-2.8.0.aar: 5.4MB-> 3.7MB (68.5%)
• Tensorflow-lite-select-tf-ops-2.8.0.aar: 109.6MB-> 14.8MB (13.5%)

การอ้างอิง

Tensorflowtts

tensorflowtts_chinese

คู่มือ Tensorflow

การทดสอบ TF อ้างอิง

การแปลง tflite อ้างอิง

แหล่งที่มาของ Google Pico TTS

การทดสอบแบบจำลองและการแปลง

แปลงการกำหนดค่าสภาพแวดล้อม

• Ubuntu: 20.04 LTS
• Python: 3.8

$ git clone https://github.com/TensorSpeech/TensorFlowTTS.git
$ cd TensorFlowTTS
$ pip install .
$ pip install git+https://github.com/repodiac/german_transliterate.git

คลายแบบจำลอง TF.7Z

การทดสอบแบบจำลอง TF

$ cd models-tf
$ python test-h5.py

รุ่น tf เป็น tflite

$ python convert-tflite.py

ภาพหน้าจอของอินเตอร์เฟสแอป