comprehensive bangla tts
1.0.0
modelo de bangla vits entrenado con fonema.
Notebook de entrenamiento-> https://github.com/mobassir94/Comprehensive-Bangla-TTS/BLOB/MAIN/BN_VITS_TTS/BANGLA_PHONEME_VITS_TRAINER.IPYNB
Test/Inference Notebook-> https://github.com/mobassir94/Comprehensive-Bangla-tts/BLOB/MAIN/BN_VITS_TTS/BANGLA_PHONEME_VITS_INELFERIA.IPYNB
Todos los archivos de peso-> https://www.kaggle.com/datasets/mobassir/comprehensive-bangla-tts
Estamos encantados de hacerle saber que el trabajo de Bangla TTS de este repositorio ahora está disponible en famosos Coqui? https://github.com/mobassir94/comprehensive-bangla-tts/blob/main/bangla_text_to_speech_(tts).ipynb
Sin embargo, para usar la tubería TTS multilingüe, aún necesita una base de código de este repositorio, gracias
Con una infinita amabilidad, misericordia y bendiciones de Allah, estamos lanzando un sistema de lector de libros islámicos de código abierto hoy para todos los que conocen/hablan bengalí y árabe. Aunque hablado por más de 210 millones de personas como primer o segundo idioma, Bangla sigue siendo un lenguaje de bajo recurso. También es un lenguaje muy difícil debido a sus muchos sonidos y reglas de ortografía. Además, el guión es muy diferente del inglés y otros idiomas latinos.
El objetivo principal de hacer una síntesis integral del habla multilingüe fue llegar a las personas a través de Hadith bengalí y el glorioso Corán en el idioma bengalí.
Recoge/raspe varios libros importantes de hadices, árabe o inglés-árabe, Tafsir y Seerah de Internet y traduce el inglés-árabe a bangla-árabe utilizando un poderoso traductor de máquina neuronal de bangla. Encontrará nuestro raspador con documentación completa aquí: https://github.com/mnansary/hadith-srcapper
Hasta donde sabemos, desde nuestra extensa búsqueda e investigación de Google y validación humana extensa) hemos descubierto que el sistema Bangla Vits TTS (texto a voz) que capacitamos y usamos para leer varios Bangla Tafsir / Hadith es el estado de mayor rendimiento de la artista (SOTA) Bangla Neural Cloning System hasta esta fecha (jueves 29 de diciembre, 2022). Sistemas TTS como GTTS, Silero-TTS, Indic-TTS por un gran margen en términos de calidad.
Primera tubería de lectura de libros multilingüe que puede leer Bangla+Arabic Code Mezy Books con facilidad.
Leemos todos los libros o fuentes Capítulo por capítulo e hicimos audiolibros.
Audiolibros realizados a VideObooks Conversion usando FFMPEG
Todo el proceso puede no ser 100% preciso. La traducción en inglés a bengalí puede contener errores en muchos casos, o porque los humanos no lo leen (lo cual es muy lento y costoso). A veces también comete errores de pronunciación crítica, pero esperamos que estos problemas se resuelvan mediante la mejora posterior de este trabajo Insha'Allah.
¿Usamos fantástico Coqui-Ai? -Kit de herramientas para el entrenamiento de texto a voz de Bangla con el conjunto de datos IITM convertido en formato LJSPEECch. Hemos entrenado 4 modelos y son: Glowtts (masculino), Glowtts (hembra), Vits (masculino) y VITS (hembra). GLOWTTS no se desempeñó tan bien como se esperaba porque el Coqui-Ai usó Vocoder adjunto. Para mejorar el rendimiento de Glowtts, uno necesita entrenar modelos de espectrograma y Vo Vocoder por separado y utilizar un poderoso vocoder como Hifi Gan 2. Las variantes masculinas y femeninas de VITS son nuestro mejor modelo que utilizamos para hacer la mayoría de los audiolibros. Desde este cuaderno de demostración de CompreHensive_Bangla_Text_To_Speech_ (TTS), puede ver que la calidad de sonido del modelo VITS es casi tan buena como el conjunto de datos de capacitación que se puede encontrar aquí: https://www.kaggle.com/datasets/mobassir/Comprehensive-Bangla-tts que significa que el final de la voz de la voz humana y la voz de la voz alta y la voz alta y la voz alta y es una voz adjunta y es una voz adjunta y es una voz adjunta y es una voz adjunta y se pone de alta calidad y se pone de alta calidad y está adjunta de alta calidad. Un buen trabajo, una forma de mejorar su rendimiento podría ser hacer un modelo G2P robusto para Bangla y usar fonemas durante la capacitación.
Cada directorio en este repositorio contiene un archivo .txt que describe lo que están haciendo los códigos de carpetas particulares.
Para una demostración de inferencia multilingüe (bangla+árabe), puede verificar este tutorial de colab Multilingüe_ (ben+ara) _tts_inference_colab_demo.ipynb y tutorial en video de la versión API están disponibles aquí
Consulte algunas de las muestras generadas por nuestro sistema:
| Libros | Total_hadiths/Surahs ' | ¿Se traduce el inglés a la máquina neuronal de bangla a bangla? | Audiolibros multilingües sintetizados de discurso neuronal (bangla+árabe) |
|---|---|---|---|
| তাফসীর ইবনে কাসীর | 114 (Surah) | Sí | https://www.youtube.com/playlist?list=plshvxzxnumvpoonpy0om5f8usm66gebwf |
| বাংলা সীরাহঃনবীজি সাল্লাল্লাহু আলাইহি ওয়াসাল্লাম এর জীবনী por el Dr. Yasir Qadhi | 101 conferencias | Sí | https://www.youtube.com/playlist?list=plshvxzxnumvpsbuqcl8oswoxcppz2a3ht |
| তাফসীরে জাকারিয়া (Tafsir Abu Bakar Zakaria) | 114 (Surah) | No | https://www.youtube.com/playlist?list=plshvxzxnumvointrzmeffubl5132e72yl |
| তাফসীরে আহসানুল বায়ান | 114 (Surah) | No | https://www.youtube.com/playlist?list=plshvxzxnumvot0a1ioq5fubqndajz7pvj |
| তাফসীরে জালালাইন (Tafsir al Jalalain) | 114 (Surah) | Sí | https://www.youtube.com/playlist?list=plshvxzxnumvnbyblhnoaixw7bas3yy2xb |
| সহিহ বুখারী | 7563 | No | https://www.youtube.com/playlist?list=plshvxzxnumvnilu0tjaqauawr9duzedv |
| সহিহ মুসলিম | 7500 | No | https://www.youtube.com/playlist?list=plshvxzxnumvompgmzky38rvoywawkssdu |
| সুনানে আন-নাসায়ী | 5758 | No | https://www.youtube.com/playlist?list=plshvxzxnumvnogsgulsp3eptr4wouhzvt |
| সুনানে আবু দাউদ | 5274 | No | https://www.youtube.com/playlist?list=plshvxzxnumvnz2qpues46jtcrrwk4qf0i |
| জামে 'আত-তিরমিজি | 3956 | No | https://www.youtube.com/playlist?list=plshvxzxnumvmb31g0eJlxmylufzryc0x |
| সুনানে ইবনে মাজাহ | 4341 | No | সুনানে ইবনে মাজাহ |
| মুয়াত্তা ইমাম মালিক | 1832 | No | https://www.youtube.com/playlist?list=plshvxzxnumvpn_8d5bn86otq9wfrocggjj |
| রিয়াদুস সলেহিন | 1905 | No | https://www.youtube.com/playlist?list=plshvxzxnumvon9guh8n28ybjijv0c-abc |
| বুলুগুল মারাম | 1568 | No | https://www.youtube.com/playlist?list=plshvxzxnumvmx11dlgonalej3ieyvtxig |
| আল লু'লু ওয়াল মারজান | 1906 | No | https://www.youtube.com/playlist?list=plshvxzxnumvoelysx1jhuo2tlzpmnmrvq |
| হাদিস সম্ভার | 2013 | No | https://www.youtube.com/playlist?list=plshvxzxnumvpccit-akpsjls4kgabzohb |
| সিলসিলা সহিহা | 60 | No | https://www.youtube.com/watch?v=gevwwa8rx3q&list=plshvxzxnumVoszibj3szrjxt1uzh_k6n7&index=11 |
| জাল জয়িফ হাদিস সিরিজ | 102 | No | https://www.youtube.com/watch?v=r1cu0aaib7y&list=plshvxzxnumvoszibj3szrjxt1uzh_k6n7 |
| মিশকাতুল মাসাবিহ | 2758 | No | https://www.youtube.com/playlist?list=plshvxzxnumvnnpeaoihxbwcmlrvblkxb |
| ৪০ হাদিস | 42 | No | https://www.youtube.com/watch?v=omcvpppvoe&list=plshvxzxnumVoszibj3szrjxt1uzh_k6n7&index=2 |
| আদাবুল মুফরাদ | 1336 | No | https://www.youtube.com/playlist?list=plshvxzxnumvnqfgs2d0dqhrx6_tylno1m |
| জুজ'উল রাফায়েল ইয়াদাইন | 56 | No | https://www.youtube.com/watch?v=mqtao_xehgs&list=plshvxzxnumvoszibj3szrjxt1uzh_k6n7&index=9 |
| সহিহ হাদিসে কুদসি | 163 | No | https://www.youtube.com/watch?v=mquiy6d6ufi&list=plshvxzxnumvoszibj3szrjxt1uzh_k6n7&index=8 |
| ১০০ সুসাব্যস্ত হাদিস | 101 | No | https://www.youtube.com/watch?v=zbs-zyi3brw&list=plshvxzxnumvoszibj3szrjxt1uzh_k6n7&index=3 |
| মিশকাতে জয়িফ হাদিস | 106 | No | https://www.youtube.com/playlist?list=plshvxzxnumvoszibj3szrjxt1uzh_k6n7 |
| শামায়েলে তিরমিযি | 320 | No | https://www.youtube.com/playlist?list=plshvxzxnumvnduizmiavavwruu0uex2bw |
| সহিহ তারগিব ওয়াত তাহরিব | 200 | No | https://www.youtube.com/playlist?list=plshvxzxnumvpi5tg5cdowbcwlqjxcslbg |
| সহিহ ফাযায়েলে আমল | 151 | No | https://www.youtube.com/playlist?list=plshvxzxnumvmmuptusjykefywztwkzyw |
| ঊপদেশ | 234 | No | https://www.youtube.com/playlist?list=plshvxzxnumvpzhcor1gdhv0fm-6je0gvm |
| রমযান বিষয়ে জাল ও দুর্বল হাদিসসমূহ | 36 | No | https://www.youtube.com/watch?v=mji1v7e5ai8&list=plshvxzxnumvoszibj3szrjxt1uzh_k6n7&index=10 |
| মুসনাদে আহমাদ | |||
| জুজ'উল কিরাত | |||
| সুনান আদ-দারিমী | |||
| তাহাবী শরিফ | |||
| সুনান দারাকুতনী |
Referencias:
APSIS Solutions Ltd.
bengalí.ai
