comprehensive bangla tts
1.0.0
Обученная модель Bangla VITS с фонемой.
Тренировочная записная книжка-> https://github.com/mobassir94/comprehness-bangla-tts/blob/main/bn_vits_tts/bangla_phoneme_vits_trainer.ipynb
Test/Test Notebbook-> https://github.com/mobassir94/comprehenge-bangla-tts/blob/main/bn_vits_tts/bangla_phoneme_vits_inference.ipynb
Все файлы веса-> https://www.kaggle.com/datasets/mobassir/comprehney-bangla-tts
Мы рады сообщить вам, что работа по бангла-TTS теперь доступна в знаменитых Coqui? TTS (Text-ty Speech), пожалуйста, проверьте это-> https://github.com/coqui-ai/tts/releases и эта демонстрация колаба и демонстрация->-> https://github.com/mobassir94/comprehney-bangla-tts/blob/main/bangla_text_to_speech_(tts).ipynb
Однако, чтобы использовать многоязычный трубопровод TTS, вам все еще нужна кодовая база этого репозитория, спасибо
Благодаря бесконечной доброте, милости и благословениям Аллаха, сегодня мы запускаем систему чтения исламских книг с открытым исходным кодом для всех, кто знает/говорит Бангла и арабский язык. Несмотря на то, что более 210 миллионов человек в качестве первого или второго языка, Bangla по -прежнему является низким языком ресурсов. Это также очень сложный язык из -за его многочисленных звуков и правил правописания. Кроме того, сценарий сильно отличается от английского и других латинских языков.
Основной целью создания всеязычного синтеза речи было охватить людей через бенгальский хадис и славный Коран на бенгальском языке.
Соберите/соскребайте различные важные книги из Бангла-Арабской или Английской Арабской Хадис, Тафсир и Сира из Интернета и перевести английский арабский в Бангла-Арабский с использованием мощного переводчика Bangla Neural Machine. Вы найдете наш скребок с полной документацией здесь: https://github.com/mnansary/hadith-srcapper
Насколько нам известно (из нашего обширного поиска в Google и обширной проверке человека) мы обнаружили, что система Bangla Vits TTS (текст к речи), которую мы обучали и использовали для чтения различных тафсир / хадис, является самым высоким уровнем исполнительного состояния искусства (SOTA) Bangla Neural Cloning Cloning Ther That That Thate That aemply Tom Такие системы, как GTTS, Silero-TTS, Indic-TTS с большим краем с точки зрения качества.
В первую очередь многоязычный трубопровод для чтения книг, который может с легкостью прочитать Bangla+арабский код.
Мы читаем главу всех книг или источников по главе и сделали аудиокниги.
Выполнены аудиокниги в VideoBooks Conversion с помощью FFMPEG
Весь процесс не может быть на 100% точным. Английский на бенгальский перевод может содержать ошибки во многих случаях, или потому, что он не читается людьми (что очень трудоемкое и дорогое). Иногда это также делает критические ошибки произношения, но мы надеемся, что эти проблемы будут решены путем последующего улучшения этой работы Insha'allah.
Мы использовали фантастическую коки-ай? -Toolkit для обучения текста в речь с помощью набора данных IITM, преобразованного в формате LJSPEECH. Мы обучили 4 модели, и они: Glowtts (мужчина), Glowtts (самка), VIT (мужчина) и VIT (женщины). Glowtts выступил так же хорошо, как ожидалось, потому что Coqui-AI использовал Attlected Vocoder. Чтобы улучшить производительность Glowtts, необходимо отдельно обучать модели спектрограммы и вокадерс и использовать мощного вокадера, например, Hifi Gan 2. Vits мужские и женские варианты - наша лучшая модель, которую мы использовали для создания большинства аудиокниг. Из этой Demo The Demo-Notebbook_bangla_Text_to_speech_ (TTS) Вы можете увидеть качество звука модели VITS почти так же хорошо, как и набор учебного заведения, который можно найти здесь: https://www.kaggle.com/datasets/mobassir/comprehne-bangla-tt Способ улучшить его производительность может состоять в том, чтобы сделать надежную модель G2P для Bangla и использовать фонемы во время обучения.
Каждый каталог в этом репо содержит .txt -файл, описывающий, что делают эти конкретные коды папок.
Для получения многоязычного (Bangla+Arabic) вывода вы можете проверить этот учебник Colab Multyringual_ (ben+ara) _tts_inference_colab_demo.ipynb и видеоурок для ее версии API доступен здесь
Проверьте некоторые из образцов, сгенерированных нашей системой:
| Книги | Total_hadiths/surahs ' | Переводит ли английский на Bangla Neural Machine? | Нейронная речь синтезировала многоязычные (Bangla+арабские) аудиокниги |
|---|---|---|---|
| তাফসীর ইবনে কাসীর | 114 (Сура) | Да | https://www.youtube.com/playlist? |
| বাংলা সীরাহঃনবীজি আলাইহি ওয়াসাল্লাম এর জীবনী Доктор Ясир Кадхи | 101 лекции | Да | https://www.youtube.com/playlist?list=plshvxzxnumvpsbuqcl8oswoxcppz2a3ht |
| তাফসীরে জাকারিয়া জাকারিয়া (Тафсир Абу Бакар Закария) | 114 (Сура) | Нет | https://www.youtube.com/playlist? |
| তাফসীরে আহসানুল বায়ান | 114 (Сура) | Нет | https://www.youtube.com/playlist? |
| তাফসীরে জালালাইন (Tafsir al jalalain) | 114 (Сура) | Да | https://www.youtube.com/playlist? |
| সহিহ বুখারী | 7563 | Нет | https://www.youtube.com/playlist?list=plshvxzxnumvnilu0tjaqaauawr9duzedv |
| সহিহ মুসলিম | 7500 | Нет | https://www.youtube.com/playlist? |
| সুনানে আন-নাসায়ী | 5758 | Нет | https://www.youtube.com/playlist?list=plshvxzxnumvnogsgulsp3eptr4wouhzvt |
| সুনানে আবু দাউদ | 5274 | Нет | https://www.youtube.com/playlist?list=plshvxzxnumvnz2qpues46jtcrrwk4qf0i |
| জামে 'আত-তিরমিজি | 3956 | Нет | https://www.youtube.com/playlist? |
| সুনানে ইবনে মাজাহ | 4341 | Нет | সুনানে ইবনে মাজাহ |
| মুয়াত্তা ইমাম মালিক | 1832 | Нет | https://www.youtube.com/playlist?list=plshvxzxnumvpn_8d5bn86otq9wfrocggj |
| রিয়াদুস সলেহিন | 1905 | Нет | https://www.youtube.com/playlist? |
| বুলুগুল মারাম | 1568 | Нет | https://www.youtube.com/playlist? |
| আল লু'লু ওয়াল মারজান | 1906 | Нет | https://www.youtube.com/playlist? |
| হাদিস সম্ভার | 2013 | Нет | https://www.youtube.com/playlist? |
| সিলসিলা সহিহা | 60 | Нет | https://www.youtube.com/watch?v=gevwwa8rx3q&list=plshvxzxnumvoszibj3szrjxt1uzh_k6n7&index=11 |
| জাল জয়িফ হাদিস সিরিজ | 102 | Нет | https://www.youtube.com/watch?v=r1cu0aaib7y&list=plshvxzxnumvoszibj3szrjxt1uzh_k6n7 |
| মিশকাতুল মাসাবিহ | 2758 | Нет | https://www.youtube.com/playlist?list=plshvxzxnumvnnpeaoihxbwcmlrvblkxb |
| ৪০ হাদিস | 42 | Нет | https://www.youtube.com/watch?v=ROMCVPPPOE&list=plshvxzxnumvoszibj3szrjxt1uzh_k6n7&index=2 |
| আদাবুল মুফরাদ | 1336 | Нет | https://www.youtube.com/playlist?list=plshvxzxnumvnqfgs2d0dqhrx6_tylno1m |
| জুজ'উল রাফায়েল ইয়াদাইন | 56 | Нет | https://www.youtube.com/watch?v=mqtao_xehgs&list=plshvxzxnumvoszibj3szrjxt1uzh_k6n7&index=9 |
| সহিহ হাদিসে কুদসি | 163 | Нет | https://www.youtube.com/watch?v=mquiy6d6ufi&list=plshvxzxnumvoszibj3szrjxt1uzh_k6n7&index=8 |
| ১০০ সুসাব্যস্ত হাদিস | 101 | Нет | https://www.youtube.com/watch?v=zbs-zy3brw&list=plshvxzxnumvoszibj3szrjxt1uzh_k6n7&index=3 |
| মিশকাতে জয়িফ হাদিস | 106 | Нет | https://www.youtube.com/playlist?list=plshvxzxnumvoszibj3szrjxt1uzh_k6n7 |
| শামায়েলে তিরমিযি | 320 | Нет | https://www.youtube.com/playlist?list=plshvxzxnumvnduizmiavavwruuex2bw |
| সহিহ তারগিব ওয়াত তাহরিব | 200 | Нет | https://www.youtube.com/playlist? |
| সহিহ ফাযায়েলে আমল | 151 | Нет | https://www.youtube.com/playlist? |
| ঊপদেশ | 234 | Нет | https://www.youtube.com/playlist?list=plshvxzxnumvpzhcor1gdhv0fm-6je0gvm |
| রমযান বিষয়ে ও দুর্বল হাদিসসমূহ হাদিসসমূহ | 36 | Нет | https://www.youtube.com/watch?v=mji1v7ai8&list=plshvxzxnumvoszibj3szrjxt1uzh_k6n7&index=10 |
| মুসনাদে আহমাদ | |||
| জুজ'উল কিরাত | |||
| সুনান আদ-দারিমী | |||
| তাহাবী শরিফ | |||
| সুনান দারাকুতনী |
Ссылки:
APSIS Solutions Ltd.
Бенгальский
