zh tts

zho-tts

Application Web, interface de ligne de commande et bibliothèque Python pour synthétiser les textes chinois dans la parole.

Installation

pip install zho-tts --user

Utilisation comme application Web

Visite ? Étreignant le visage pour une démo en direct.

Vous pouvez également l'exécuter localement en exécutant zho-tts-web dans CLI et en ouvrant votre navigateur sur http://127.0.0.1:7860.

Utilisation comme CLI

zho-tts-cli synthesize "长江 航务 管理局 和 长江 轮船 总公司 最近 决定 安排 一百三十三 艘 客轮 迎接 长江 干线 春运。 "

La sortie peut être écoutée ici.

 # Same example using IPA input
zho-tts-cli synthesize-ipa " ʈʂː|a˧˩˧˘|ŋ|tɕ˘|j|a˥˘|ŋ˘|SIL0|x|a˧˥˘|ŋ|u˥˩|SIL0|k|w|a˧˩˧|n|l˘|i˧˩˧|tɕː|y˧˥ˑ|SIL0|x|ɤ˧˥|SIL0|ʈʂː|a˧˩˧˘|ŋ|tɕ˘|j|a˥˘|ŋ|SIL0|l|w|ə˧˥|n|ʈʂʰ˘|w|a˧˥|n|SIL0|ts˘|ʊ˧˩˧|ŋ˘|kː|ʊ˥|ŋ|s|ɹ̩˥ˑ|SIL0|ts|w˘|ei̯˥˩|tɕ|i˥˩˘|n|SIL0|tɕ|ɥ|e˧˥|t|i˥˩|ŋ|SIL3|a˥|n|pʰ|ai̯˧˥|SIL0|i˥ˑ|p|ai̯˧˩˧|s|a˥˘|n|ʂ˘|ɻ̩˧˥|s|a˥|n|SIL0|s˘|ou̯˥|SIL0|kʰˑ|ɤ˥˩|lː|wˑ|ə˧˥ˑ|n|SIL0|i˧˥ː|ŋ|tɕ˘|j˘|e˥|SIL0|ʈʂː|a˧˩˧|ŋ|tɕ˘|j|a˥˘|ŋ|SIL0|k˘|a˥˩|n|ɕ|j˘|ɛ˥˩|n˘|SIL0|ʈʂʰˑ|w˘|ə˥˘|nː|y˥˩ˑ|nː|。 "

La sortie peut être écoutée ici.

Utilisation comme bibliothèque

 from pathlib import Path
from tempfile import gettempdir

from zho_tts import Synthesizer , Transcriber , normalize_audio , save_audio

text = "长江 航务 管理局 和 长江 轮船 总公司 最近 决定 安排 一百三十三 艘 客轮 迎接 长江 干线 春运。"

transcriber = Transcriber ()
synthesizer = Synthesizer ()

text_ipa = transcriber . transcribe_to_ipa ( text )
audio = synthesizer . synthesize ( text_ipa )

tmp_dir = Path ( gettempdir ())
save_audio ( audio , tmp_dir / "output.wav" )

# Optional: normalize output
normalize_audio ( tmp_dir / "output.wav" , tmp_dir / "output_norm.wav" )

Informations sur le modèle

Le modèle TTS utilisé est publié ici.

Ensemble de phonèmes

• Voyelles: a ɛ e ə ɚ ɤ iou ʊ y
• Diphtongues: ai̯ au̯ ei̯ ou̯
• CONSONANTS: FJK Kʰ LMNP Pʰ ɹ̩ Commeardez
• Pauses:
  • SIL0 (pas de pause)
  • Sil1 (courte pause)
  • Sil2 (pause)
  • Sil3 (longue pause)
• Caractères spéciaux :. ?

Les voyelles et les diphtongues contiennent l'un de ces tons:

• ˥ (premier ton)
• ˧˥ (deuxième ton)
• ˧˩˧ (troisième ton)
• ˥˩ (quatrième ton)
• (aucun)

¹ Ces consonnes contiennent également des tons.

Les voyelles, diphtongues et consonnes contiennent l'un de ces marqueurs de durée:

• ˘ -> Très court, par exemple, ou̯.
• rien -> normal, par exemple, ou̯
• ˑ -> demi-long, par exemple, ou̯ˑ
• ː -> Long, par exemple, ou̯ː

Les tons et les marqueurs de durée peuvent être combinés, par exemple, ə˧˥ː

Conférenciers

Citation

Si vous souhaitez citer ce dépôt, vous pouvez utiliser le Bibtex-Entry généré par GitHub (voir à propos de => citer ce référentiel ).

• Taubert, S. (2024). ZHO-TTS (version 0.0.2) [Logiciel informatique]. https://doi.org/10.5281/zenodo.11048515

Remerciements

Financé par la Deutsche Forschungsgemeinschaft (DFG, German Research Foundation) - Project-ID 416228727 - CRC 1410

Les auteurs remercient le support GWK pour la base de ce projet en fournissant du temps informatique via le Center for Information Services et HPC (ZIH) à Tu Dresde.

Les auteurs sont reconnaissants au Centre pour les services d'information et l'informatique haute performance [Zentrum Fur InformationsDienste und Hochleistungsrechnen (Zih)] à Tu Dresden pour avoir fourni ses installations pour des calculs à haut débit.