تدريب البنغلا نموذج مع phoneme.
دفتر تدريب-> https://github.com/mobassir94/comprehmuny-bangla-tts/blob/main/bn_vits_tts/bangla_phoneme_vits_trainer.ipynb
Test/Inference Notebook-> https://github.com/mobassir94/comprehmenment-bangla-tts/blob/main/bn_vits_tts/bangla_phoneme_vits_inference.ipynb
جميع ملفات الوزن-> https://www.kaggle.com/datasets
يسعدنا أن نعلمك أن عمل Bangla TTS لهذا الريبو متاح الآن في coqui الشهير (Text-to-Speed) ، يرجى التحقق من ذلك-> https://github.com/coqui-ai/tts/release و This Colab Demo أيضًا-> https://github.com/mobassir94/comprehmuny-bangla-tts/blob/main/bangla_text_to_speech_(tts).ipynb
ومع ذلك لاستخدام خط أنابيب TTS متعدد اللغات ، ما زلت بحاجة إلى قاعدة كود لهذا المستودع ، شكرًا
مع اللطف اللانهائي والرحمة وبركات الله ، نطلق نظام قارئ الكتب الإسلامية مفتوحة المصدر اليوم لكل من يعرف/يتحدث البنغالية والعربية. على الرغم من أن أكثر من 210 مليون شخص كلغة أول أو ثانية ، فإن بنغلا لا تزال لغة مورد منخفضة. إنها أيضًا لغة صعبة للغاية بسبب العديد من أصواتها وقواعد الإملاء. بالإضافة إلى ذلك ، يختلف البرنامج النصي اختلافًا كبيرًا عن اللغة الإنجليزية واللغات اللاتينية الأخرى.
كان الغرض الرئيسي من صنع تخليق شامل متعدد اللغات هو الوصول إلى الناس عبر الحديث البنغالي والقرآن المجيد في اللغة البنغالية.
جمع/كشط مختلف كتب بنغلا-أربيك أو اللغة الإنجليزية-الكتب العاربي ، تافزير وسيراه من الإنترنت وترجمة اللغة الإنجليزية الأرجية إلى بنغلا أربيك باستخدام مترجم آلي عصبي قوي بنجلا. ستجد مكشطة لدينا مع وثائق شاملة هنا: https://github.com/mnansary/hadith-srcapper
على حد علمنا (من بحثنا عن جوجل في Google والبحث والتحقق البشري الواسع) ، اكتشفنا أن نظام TTS (نص إلى الكلام) الذي دربناه واستخدمناه في قراءة مختلف نظام Tafsir / Madith هو أعلى حالة من الأداء في بنجلا (SOTA) بنجلا. أنظمة TTS مثل GTTS ، Silero-TTS ، indic-tts بهامش كبير من حيث الجودة.
أول خط أنابيب قراءة الكتب متعددة اللغات يمكنه قراءة الكتب المخلوطة بنغلا+الرمز العربي بكل سهولة.
نقرأ جميع الكتب أو المصادر الفصل تلو الآخر وصنعوا الكتب الصوتية.
تم تنفيذ كتب AudioBooks لتحويل الكتب عبر الفيديو باستخدام FFMPEG
قد لا تكون العملية برمتها دقيقة بنسبة 100 ٪. قد تحتوي الترجمة الإنجليزية إلى البنغالية على أخطاء في كثير من الحالات ، أو لأن البشر لا يقرأها (والتي تستغرق وقتًا طويلاً ومكلفة). إنه في بعض الأحيان يجعل أخطاء النطق الحرجة أيضًا ، لكننا نأمل أن يتم حل هذه المشكلات من خلال التحسن اللاحق لهذا العمل Insha'allah.
استخدمنا Coqui-AAI رائعة؟ -مجموعة أدوات للتدريب على النص إلى خط الكحضات البنغالية مع مجموعة بيانات IITM التي تم تحويلها بتنسيق LJSPEEDE. لقد قمنا بتدريب 4 نماذج وهي: Glowtts (ذكر) ، Glowtts (أنثى) ، وحدات (ذكر) وحالات (أنثى). لم يكن أداء Glowtts أداءً كما هو متوقع لأن Coqui-AAI استخدم المركز المرفق المرفق. من أجل تحسين أداء Glowtts ، يحتاج المرء إلى تدريب نماذج الطيف والمفرط بشكل منفصل واستخدم Vocoder قويًا بدلاً من ذلك مثل Hifi Gan 2. من دفتر ملاحظات التوضيح الشامل هذا الشامل _bangla_text_to_speech_ (tts) ، يمكنك رؤية جودة الصوت لنموذج Vits تقريبًا مثل مجموعة بيانات التدريب التي يمكن العثور عليها هنا: https://www.kaggle.com/datasets يمكن أن تكون طريقة تحسين أدائها هي جعل نموذج G2P قويًا لبنغلا واستخدام الصوتيات أثناء التدريب.
يحتوي كل دليل في هذا الريبو على ملف .txt الذي يصف ما تفعله رموز المجلدات المحددة.
بالنسبة إلى العرض التوضيحي متعدد اللغات (Bangla+Arabic) ، يمكنك التحقق من هذا البرنامج التعليمي Multilingual_ (ben+ara) _tts_inference_colab_demo.ipynb والفيديو التعليمي الخاص بإصدار API من ذلك متاح هنا
تحقق من بعض العينات الناتجة عن نظامنا:
| كتب | Total_hadiths/surahs | هل يتم ترجمة اللغة الإنجليزية للآلة العصبية البنغالية؟ | الكلام العصبي تصنيع الكتب الصوتية متعددة اللغات (البنغالية+العربية) |
|---|---|---|---|
| তাফসীর ইবনে কাসীর | 114 (سورة) | نعم | https://www.youtube.com/playlist؟list=plshvxzxnumvpoonpoonpy0om5f8usm66gebwf |
| বাংলা সীরাহঃনবীজি সাল্লাল্লাহু আলাইহি ওয়াসাল্লাম জীবনী জীবনী من قبل الدكتور ياسر قاديهي | 101 محاضرات | نعم | https://www.youtube.com/playlist؟list=plshvxzxnumvpsbuqcl8oswoxcppz2a3ht |
| তাফসীরে জাকারিয়া (Tafsir Abu Bakar Zakaria) | 114 (سورة) | لا | https://www.youtube.com/playlist؟list=plshvxzxnumvointrzMeffubl5132e72yl |
| তাফসীরে আহসানুল বায়ান | 114 (سورة) | لا | https://www.youtube.com/playlist؟list=plshvxzxnumvot0a1ioq5fubqndajz7pvj |
| তাফসীরে জালালাইন (Tafsir al Jalalain) | 114 (سورة) | نعم | https://www.youtube.com/playlist؟list=plshvxzxnumvnbyblhinoaixw7bas3yy2xb |
| সহিহ বুখারী | 7563 | لا | https://www.youtube.com/playlist؟list=plshvxzxnumvnilu0tjaqaauauawr9duzedv |
| সহিহ মুসলিম | 7500 | لا | https://www.youtube.com/playlist؟list=plshvxzxnumvompgmzky38rvoywkssdu |
| সুনানে আন-নাসায়ী | 5758 | لا | https://www.youtube.com/playlist؟list=plshvxzxnumvnogsgulsp3eptr4wouhzvt |
| সুনানে আবু দাউদ | 5274 | لا | https://www.youtube.com/playlist؟list=plshvxzxnumvnz2qpues46jtcrwk4qf0i |
| জামে 'আত-তিরমিজি | 3956 | لا | https://www.youtube.com/playlist؟list=plshvxzxnumvmb31g0oejlxmylufzryc0x |
| সুনানে ইবনে মাজাহ | 4341 | لا | সুনানে ইবনে মাজাহ |
| মুয়াত্তা ইমাম মালিক | 1832 | لا | https://www.youtube.com/playlist؟list=plshvxzxnumvpn_8d5bn86otq9wfrocggj |
| রিয়াদুস সলেহিন | 1905 | لا | https://www.youtube.com/playlist؟list=plshvxzxnumvon9guh8n28ybjijv0c-abc |
| বুলুগুল মারাম | 1568 | لا | https://www.youtube.com/playlist؟list=plshvxzxnumvmx11dlgonalej3ieyvtxig |
| আল লু'লু ওয়াল মারজান | 1906 | لا | https://www.youtube.com/playlist؟list=plshvxzxnumvoelysx1jhuo2tlzpmnmrvq |
| হাদিস সম্ভার | 2013 | لا | https://www.youtube.com/playlist؟list=plshvxzxnumvpccit-akpsjls4kgabzohb |
| সিলসিলা সহিহা | 60 | لا | https://www.youtube.com/watch؟v=gevwa8rx3q&list=plshvxzxnumvoszibj3szrjxt1uzh_k6n7&index=11 |
| জাল জয়িফ হাদিস সিরিজ | 102 | لا | https://www.youtube.com/watch؟v=r1cu0aaib7y&list=plshvxzxnumvoszibj3szrjxt1uzh_k6n7 |
| মিশকাতুল মাসাবিহ | 2758 | لا | https://www.youtube.com/playlist؟list=plshvxzxnumvnnnnnpeaihxbwcmlrvblkxb |
| ৪০ হাদিস | 42 | لا | https://www.youtube.com/watch؟v=romcvpppvoe&list=plshvxnumvoszibj3szrjxt1uzh_k6n7&index=2 |
| আদাবুল মুফরাদ | 1336 | لا | https://www.youtube.com/playlist؟list=plshvxzxnumvnqfgs2d0dqhrx6_tylno1m |
| জুজ' উল রাফায়েল ইয়াদাইন | 56 | لا | https://www.youtube.com/watch؟v=mqtao_xehgs&list=plshvxznumvoszibj3szrjxt1uzh_k6n7&index=9 |
| সহিহ হাদিসে কুদসি | 163 | لا | https://www.youtube.com/watch؟v=mquiy6d6ufi&list=plshvxzxnumvoszibj3szrjxt1uzh_k6n7&index=8 |
| ১০০ সুসাব্যস্ত হাদিস | 101 | لا | https://www.youtube.com/watch؟v=zbs-zyi3brw&list=plshvxnumvoszibj3szrjxt1uzh_k6n7&index=3 |
| মিশকাতে জয়িফ হাদিস | 106 | لا | https://www.youtube.com/playlist؟list=plshvxzxnumvoszibj3szrjxt1uzh_k6n7 |
| শামায়েলে তিরমিযি | 320 | لا | https://www.youtube.com/playlist؟list=plshvxzxnumvnduizmiaVavWruu0uex2bw |
| সহিহ তারগিব ওয়াত তাহরিব | 200 | لا | https://www.youtube.com/playlist؟list=plshvxzxnumvpi5tg5cdowbcwlqjxcslbg |
| সহিহ ফাযায়েলে আমল | 151 | لا | https://www.youtube.com/playlist؟list=plshvxznumvmmuptusjykefywztwkzyw |
| ঊপদেশ | 234 | لا | https://www.youtube.com/playlist؟list=plshvxzxnumvpzhcor1gdhv0fm-6je0gvm |
| রমযান বিষয়ে জাল ও দুর্বল | 36 | لا | https://www.youtube.com/watch؟v=mji1v7e5ai8&list=plshvxzxnumvoszibj3szrjxt1uzh_k6n7&index=10 |
| মুসনাদে আহমাদ | |||
| জুজ' উল কিরাত | |||
| সুনান আদ-দারিমী | |||
| তাহাবী শরিফ | |||
| সুনান দারাকুতনী |
مراجع :
Apsis Solutions Ltd.
البنغالية