zh tts

zho-tts

Web-App, Befehlszeilenschnittstelle und Python-Bibliothek zur Synthese chinesischer Texte in Sprache.

Installation

pip install zho-tts --user

Nutzung als Web -App

Besuchen ? Umarmt das Gesicht für eine lebende Demo.

Sie können es auch lokal ausführen, um zho-tts-web in CLI auszuführen und Ihren Browser unter http://127.0.0.1:7860 zu öffnen.

Verwendung als CLI

zho-tts-cli synthesize "长江 航务 管理局 和 长江 轮船 总公司 最近 决定 安排 一百三十三 艘 客轮 迎接 长江 干线 春运。 "

Die Ausgabe kann hier angehört werden.

 # Same example using IPA input
zho-tts-cli synthesize-ipa " ʈʂː|a˧˩˧˘|ŋ|tɕ˘|j|a˥˘|ŋ˘|SIL0|x|a˧˥˘|ŋ|u˥˩|SIL0|k|w|a˧˩˧|n|l˘|i˧˩˧|tɕː|y˧˥ˑ|SIL0|x|ɤ˧˥|SIL0|ʈʂː|a˧˩˧˘|ŋ|tɕ˘|j|a˥˘|ŋ|SIL0|l|w|ə˧˥|n|ʈʂʰ˘|w|a˧˥|n|SIL0|ts˘|ʊ˧˩˧|ŋ˘|kː|ʊ˥|ŋ|s|ɹ̩˥ˑ|SIL0|ts|w˘|ei̯˥˩|tɕ|i˥˩˘|n|SIL0|tɕ|ɥ|e˧˥|t|i˥˩|ŋ|SIL3|a˥|n|pʰ|ai̯˧˥|SIL0|i˥ˑ|p|ai̯˧˩˧|s|a˥˘|n|ʂ˘|ɻ̩˧˥|s|a˥|n|SIL0|s˘|ou̯˥|SIL0|kʰˑ|ɤ˥˩|lː|wˑ|ə˧˥ˑ|n|SIL0|i˧˥ː|ŋ|tɕ˘|j˘|e˥|SIL0|ʈʂː|a˧˩˧|ŋ|tɕ˘|j|a˥˘|ŋ|SIL0|k˘|a˥˩|n|ɕ|j˘|ɛ˥˩|n˘|SIL0|ʈʂʰˑ|w˘|ə˥˘|nː|y˥˩ˑ|nː|。 "

Die Ausgabe kann hier angehört werden.

Nutzung als Bibliothek

 from pathlib import Path
from tempfile import gettempdir

from zho_tts import Synthesizer , Transcriber , normalize_audio , save_audio

text = "长江 航务 管理局 和 长江 轮船 总公司 最近 决定 安排 一百三十三 艘 客轮 迎接 长江 干线 春运。"

transcriber = Transcriber ()
synthesizer = Synthesizer ()

text_ipa = transcriber . transcribe_to_ipa ( text )
audio = synthesizer . synthesize ( text_ipa )

tmp_dir = Path ( gettempdir ())
save_audio ( audio , tmp_dir / "output.wav" )

# Optional: normalize output
normalize_audio ( tmp_dir / "output.wav" , tmp_dir / "output_norm.wav" )

Modellinfo

Das gebrauchte TTS -Modell wird hier veröffentlicht.

Phonem -Set

• Vokale: a ɛ e ə ɚ ɤ iou ʊ y
• Diphthongs: ai̯ au̯ ei̯ ou̯
• Konsonanten: fjk kʰ lmnp pʰ ɹ̩¹ ɻ¹ ɻ̩¹ ɻ̩¹ St Ts Tɕ Tɕʰ Wx ŋ ɕ ɥ ʂ ʈʂ ʈʂʂʂʰ ʈʂʂʂʰ ʈʂʂʂʰ ʈʂʂʂʰ ʈʂʂʂʰ ʈʂʂʂʰ ʈʂʂʂʰ ʈʂʂʂʰ
• Pausen:
  • SIL0 (keine Pause)
  • SIL1 (kurze Pause)
  • SIL2 (Pause)
  • SIL3 (lange Pause)
• Sonderzeichen :. ?

Vokale und Diphthongs enthalten eine dieser Töne:

• ˥ (erster Ton)
• ˧˥ (zweiter Ton)
• ˧˩˧ (dritter Ton)
• ˥˩ (vierter Ton)
• (keiner)

¹ Diese Konsonanten enthalten auch Töne.

Vokale, Diphthongs und Konsonanten enthalten einen dieser Dauermarker:

• ˘ -> Sehr kurz, z. B. Ou̯̯
• Nichts -> normal, zB, OU̯
• ˑ -> halb lang, zB, OU̯ˑ
• ː -> lang, z. B. Ou̯ː

Töne und Dauermarker können kombiniert werden, z. B. ə˧˥ː

Sprecher

Zitat

Wenn Sie dieses Repo zitieren möchten, können Sie das von GitHub erzeugte Bibtex-Eingang verwenden (siehe über => dieses Repository zitieren ).

• Taubert, S. (2024). ZHO-TTS (Version 0.0.2) [Computersoftware]. https://doi.org/10.5281/zenodo.11048515

Anerkennung

Finanziert von der Deutschen Forschungsgemeinschaft (DFG, Deutsche Forschungsstiftung)-Projekt-ID 416228727-CRC 1410

Die Autoren danken für die GWK -Unterstützung für die Grundierung dieses Projekts, indem sie die Rechenzeit über das Center for Information Services und HPC (ZIH) bei Tu Dresden zur Verfügung stellen.

Die Autoren danken dem Center for Information Services und High Performance Computing [Zentrum Fur -Informationsdienste und Hochleistung -anschlechnen (ZIH)] bei Tu Dresden für die Bereitstellung seiner Einrichtungen für Hochdurchsatzberechnungen.