deepaudio tts

ما هو Depaudio-TTS؟

يعد Depaudio-TTS إطارًا لتدريب نماذج النص على الشبكة العصبية (TTS). إنه لا يتضمن أو سيشمل بنيات الشبكة العصبية الشهيرة لنماذج TTS و Vocoder.

لجعل من السهل استخدام وظائف مختلفة مثل الدقة المختلطة ، والتدريب متعدد العقدة ، والتدريب على TPU ، إلخ ، قدمت Pytorch Lighting و Hydra في هذا الإطار. لا يزال قيد التطوير.

أمثلة تدريب

1. المعالجة المسبقة لك البيانات. (البرامج النصية تتصدر قريبًا ، أو يمكنك اتباع تعليمي لخطاب مجداف لهذه الخطوة.)
2. تدريب النموذج. يمكنك اختيار تجربة واحدة في Depaudio/TTS/CLI/Configs/Experience. ثم قم بتدريب النموذج بالخطوط التالية:

 $ export PYTHONPATH="${PYTHONPATH}:/dir/of/this/project/"
$ python -m deepaudio.tts.cli.train experiment=tacotron2 datamodule.train_metadata=/you/path/to/train_metadata datamodule.dev_metadata=/you/path/to/dev_metadata

النماذج المدعومة

1. Tacotron2
2. Fastspeech2
3. Transformer TTS
4. موازي Wavegan
5. هيفيجان
6. حالات

الخطة المستقبلية

رمز نظيف

1. إزالة الرموز الزائدة.
2. جعل depaudio.tts.models أكثر نظافة.

النماذج

1. نماذج أخرى.
2. نماذج ما قبل.

النشر

1. onnx
2. جيت

كيفية المساهمة في Depaudio-TTS

إنه مشروع شخصي. لذلك ليس لدي ما يكفي من موارد GPU لإجراء الكثير من التجارب. هذا المشروع لا يزال قيد التطوير. أنا أقدر أي نوع من التعليقات أو المساهمات. لا تتردد في جعل عملية السحب لبعض المشكلات الصغيرة مثل إصلاحات الأخطاء ، ونتائج التجربة. إذا كان لديك أي أسئلة ، يرجى فتح مشكلة.

يُقرّ

لقد استعارت الكثير من الرموز من ESPNET و PADDLE CLECK