تنزيل Multi Singer - تنزيل رمز المصدر Multi Singer

Multi Singer

كود الذكاء الاصطناعي

1.0.0

تنزيل

متعدد الأغاني: فريس سريع الغنائي الغناء مع مجموعة واسعة النطاق

تنفيذ Pytorch (ACM MM'21) متعدد الأغاني: فريس سريع الغناء في الغناء الصوتي مع مجموعة واسعة النطاق.

متطلبات

انظر المتطلبات في المتطلبات. txt:

Linux
بيثون 3.6
Pytorch 1.0+
Librosa
JSON ، TQDM ، قطع الأشجار

ابدء

قم بتطبيق وصفة على مجموعة البيانات الخاصة بك

ضع أي ملفات WAV في دليل البيانات
تحرير التكوين في config/config.yaml

1

استخدم نقطة التفتيش الخاصة بنا ، أو
يمكنك أيضًا تدريب المشفر بمفردك هنا ، وتعيين enc_model_fpath في config/config.yaml. يرجى تعيين params كتلك الموجودة في encoder/params_data و encoder/params_model .

2. المعالجة المسبقة

استخراج طيف الميل

 python preprocess . py - i data / wavs - o data / feature - c config / config . yaml

-i مجلد الصوت الخاص بك

-o المجلد ميزة صوتية الإخراج

-c config file

3. القطار

تدريب مشروط على طيف الميل

 python train . py - i data / feature - o checkpoints / - - config config / config . yaml

-i ميزة صوتية

-o دليل لحفظ نقاط التفتيش

-c config file

4. الاستدلال

 python inference . py - i data / feature - o outputs /  - c checkpoints / * . pkl - g config / config . yaml

-i ميزة صوتية

-o دليل لحفظ الكلام المولد

-c ملف نقاط التفتيش

-c config file

5. غناء تخليق الصوت

لغناء التوليف الصوتي:

خذ Fastspeech 2 المعدلة لتوليف طيف الميل
استخدم طيف الميل المترابط في Multi-singer لتخليق الموجة.

نقطة التفتيش

تدرب على Openinger

شكر وتقدير

GE2E
Fastspeech 2
موازي Wavegan

اقتباس

 @inproceedings{huang2021multi,
  title={Multi-Singer: Fast Multi-Singer Singing Voice Vocoder With A Large-Scale Corpus},
  author={Huang, Rongjie and Chen, Feiyang and Ren, Yi and Liu, Jinglin and Cui, Chenye and Zhao, Zhou},
  booktitle={Proceedings of the 29th ACM International Conference on Multimedia},
  pages={3945--3954},
  year={2021}
}