comprehensive bangla tts
1.0.0
음소와 함께 훈련 된 Bangla Vits 모델.
교육 노트-> https://github.com/mobassir94/comprehensive-bangla-tts/blob/main/bn_vits_tts/bangla_phoneme_vits_trainer.ipynb
테스트/추론 노트-> https://github.com/mobassir94/comprehensive-bangla-tts/blob/main/bn_vits_tts/bangla_phoneme_vits_inference.ipynb
모든 가중치 파일-> https://www.kaggle.com/datasets/mobassir/comprehensive-bangla-tts
우리는이 repo의 Bangla tts 작업이 유명한 Coqui? Tts (Text-To-speech)에서 사용할 수 있다는 것을 알려 드리게되어 기쁩니다. https://github.com/mobassir94/comprehensive-bangla-tts/blob/main/bangla_text_to_to_to_speech_(tts).ipynb
그러나 다국어 TTS 파이프 라인을 사용하려면이 저장소의 코드베이스가 여전히 필요합니다. 감사합니다.
알라의 무한한 친절, 자비 및 축복으로, 우리는 오늘날 방글라와 아랍어를 알고있는 모든 사람들을 위해 오늘날 오픈 소스 이슬람 책 독자 시스템을 시작하고 있습니다. 2 억 2 천만 명이 넘는 사람들이 제 1 또는 제 2 언어로 말했지만 방글라는 여전히 낮은 자원 언어입니다. 또한 많은 소리와 철자 규칙 때문에 매우 어려운 언어입니다. 또한 스크립트는 영어 및 기타 라틴어와는 크게 다릅니다.
포괄적 인 다국어 연설 합성을 만드는 주요 목적은 벵골어 하디스와 영광스러운 꾸란을 통해 벵골어 언어로 사람들에게 다가가는 것이 었습니다.
인터넷에서 다양한 중요한 방글라 아라비아 또는 영어-아라비아 hadith, tafsir 및 seerah 책을 수집/스크랩하고 강력한 방글라 신경 기계 번역기를 사용하여 영어-아라비아어를 Bangla-Abic으로 번역하십시오. 여기에서 포괄적 인 문서가있는 스크레이퍼를 찾을 수 있습니다 : https://github.com/mnansary/hadith-srcapper
우리의 지식 (광범위한 Google 검색 및 연구 및 광범위한 인간 검증에서) 우리는 Bangla가 다양한 방글라 Tafsir / Hadith를 읽는 데 훈련하고 사용했던 TTS (Text to Speech) 시스템이 예술의 가장 높은 공연 상태 (SOTA) Bangla Neural Voice Cloning System (목요일, 12 월 29 일, 2022 년)을 위해 공개 된 가장 높은 성과의 최첨단 상태라는 것을 알게되었습니다. GTTS, SILERO-TTS, 품질 측면에서 큰 마진과 같은 TTS 시스템.
Bangla+Arabic Code Mixed Book을 쉽게 읽을 수있는 최초의 다국어 도서 읽기 파이프 라인.
우리는 모든 책이나 출처를 챕터별로 읽고 오디오 북을 만들었습니다.
FFMPEG를 사용하여 videobooks 변환에 오디오 북을 수행했습니다
전체 프로세스는 100% 정확하지 않을 수 있습니다. 영어에서 벵골어 번역에는 많은 경우에 오류가 포함될 수 있거나 인간이 읽지 않기 때문에 (매우 시간이 많이 걸리고 비싸다). 때로는 비판적 발음 실수를 저지르지 만,이 작업의 후속 개선으로 인해 이러한 문제가 해결되기를 바랍니다.
우리는 환상적인 coqui-ai를 사용 했습니까? -LJSpeech 형식으로 변환 된 IITM 데이터 세트를 사용한 Bangla 텍스트 음성 연질 교육 용 툴킷. 우리는 4 가지 모델을 훈련 시켰으며 Glowtts (남성), Glowtts (여성), vits (남성) 및 vits (여성)입니다. Coqui-Ai가 부착 된 보코더를 사용했기 때문에 Glowtts는 예상만큼 성능이 없었습니다. 글로우트 성능을 향상시키기 위해서는 스펙트로 그램 모델과 보코더를 별도로 훈련시켜야하고 대신 Hifi Gan 2와 같은 강력한 보코더를 사용해야합니다. Vits 남성과 여성 변형은 대부분의 오디오 북을 만드는 데 사용한 최고의 모델입니다. 이 comprehensive_bangla_text_to_speech_ (tts) 데모 노트북에서 Vits 모델의 음질은 여기에서 찾을 수있는 교육 데이터 세트만큼 좋은 것을 볼 수 있습니다. 작업, 성능을 향상시키는 한 가지 방법은 Bangla의 강력한 G2P 모델을 만들고 훈련 중에 음소를 사용하는 것입니다.
이 repo의 각 디렉토리에는 특정 폴더 코드가 수행하는 작업을 설명하는 .txt 파일이 포함되어 있습니다.
다국어 (Bangla+Arabic) 추론 데모의 경우이 Colab 튜토리얼 Multingual_ (Ben+ARA) _TTS_INFERFENCE_COLAB_DEMO.IPYNB 및 API 버전의 비디오 자습서를 확인할 수 있습니다.
우리 시스템에서 생성 한 샘플 중 일부를 확인하십시오.
| 서적 | Total_hadiths/Surahs ' | Bangla Neural Machine에서 영어로 번역 되었습니까? | 신경 연설은 다국어 (Bangla+Arabic) 오디오 북을 합성했습니다 |
|---|---|---|---|
| তাফসীর তাফসীর কাসীর | 114 (수라) | 예 | https://www.youtube.com/playlist?list=plshvxzxnumvpoonpy05f8usm66gebwf |
| 야시르 Qadhi 박사의 বাংলা বাংলা সাল্লাল্লাহু সাল্লাল্লাহু সীরাহঃনবীজি ওয়াসাল্লাম এর জীবনী জীবনী | 101 강의 | 예 | https://www.youtube.com/playlist?list=plshvxzxnumvpsbuqcl8oswoxcppz2a3ht |
| তাফসীরে তাফসীরে (Tafsir Abu Bakar Zakaria) | 114 (수라) | 아니요 | https://www.youtube.com/playlist?list=plshvxzxnumvointrzmeffubl5132e72yl |
| তাফসীরে তাফসীরে বায়ান | 114 (수라) | 아니요 | https://www.youtube.com/playlist?list=plshvxzxnumvot0a1ioq5fubqndajz7pvj |
| তাফসীরে তাফসীরে (Tafsir al Jalalain) | 114 (수라) | 예 | https://www.youtube.com/playlist?list=plshvxzxnumvnbyblhnoaixw7bas3yy2xb |
| সহিহ সহিহ | 7563 | 아니요 | https://www.youtube.com/playlist?list=plshvxzxnumvnilu0tjaqaauawr9duzedv |
| সহিহ সহিহ | 7500 | 아니요 | https://www.youtube.com/playlist?list=plshvxzxnumvompgmzky38rvoywawkssdu |
| সুনানে সুনানে নাসায়ী | 5758 | 아니요 | https://www.youtube.com/playlist?list=plshvxzxnumvnogsgulsp3eptr4wouhzvt |
| সুনানে সুনানে দাউদ | 5274 | 아니요 | https://www.youtube.com/playlist?list=plshvxzxnumvnz2qpues46jtcrrwk4qf0i |
| জামে 'তিরমিজি- আত | 3956 | 아니요 | https://www.youtube.com/playlist?list=plshvxzxnumvmb31g0oejlxmylufzryc0x |
| সুনানে সুনানে মাজাহ | 4341 | 아니요 | সুনানে সুনানে মাজাহ |
| মুয়াত্তা মুয়াত্তা মালিক | 1832 | 아니요 | https://www.youtube.com/playlist?list=plshvxzxnumvpn_8d5bn86otq9wfrocggj |
| রিয়াদুস রিয়াদুস | 1905 | 아니요 | https://www.youtube.com/playlist?list=plshvxzxnumvon9guh8n28ybjijv0c-abc |
| বুলুগুল বুলুগুল | 1568 | 아니요 | https://www.youtube.com/playlist?list=plshvxzxnumvmx11dlgonalej3ieyvtxig |
| আল আল আল লু মারজান মারজান | 1906 | 아니요 | https://www.youtube.com/playlist?list=plshvxzxnumvoelysx1jhuo2tlzpmnmrvq |
| হাদিস হাদিস | 2013 | 아니요 | https://www.youtube.com/playlist?list=plshvxzxnumvpccit-akpsjls4kgabzohb |
| সিলসিলা সিলসিলা | 60 | 아니요 | https://www.youtube.com/watch?v=gevwwa8rx3q&list=plshvxzxnumvoszibj3szrjxt1uzh_k6n7&index=11 |
| জাল জাল হাদিস জয়িফ | 102 | 아니요 | https://www.youtube.com/watch?v=r1cu0aaib7y&list=plshvxzxnumvoszibj3szrjxt1uzh_k6n7 |
| মিশকাতুল মিশকাতুল | 2758 | 아니요 | https://www.youtube.com/playlist?list=plshvxzxnumvnnnpeaoihxbwcmlrvblkxb |
| ৪০ ৪০ | 42 | 아니요 | https://www.youtube.com/watch?v=ROMCVPPPVOE&list=PLSHVXZXNUMVOSZIBJ3SZRJXT1UZH_K6N7&index=2 |
| আদাবুল আদাবুল | 1336 | 아니요 | https://www.youtube.com/playlist?list=plshvxzxnumvnqfgs2dqhrx6_tylno1m |
| জুজ জুজ রাফায়েল উল | 56 | 아니요 | https://www.youtube.com/watch?v=mqtao_xehgs&list=plshvxzxnumvoszibj3szrjxt1uzh_k6n7&index=9 |
| সহিহ সহিহ কুদসি | 163 | 아니요 | https://www.youtube.com/watch?v=mquiy6d6ufi&list=plshvxzxnumvoszibj3szrjxt1uzh_k6n7&index=8 |
| ১০০ ১০০ হাদিস | 101 | 아니요 | https://www.youtube.com/watch?v=zbs-zyi3brw&list=plshvxzxnumvoszibj3szrjxt1uzh_k6n7&index=3 |
| মিশকাতে মিশকাতে হাদিস | 106 | 아니요 | https://www.youtube.com/playlist?list=plshvxzxnumvoszibj3szrjxt1uzh_k6n7 |
| শামায়েলে শামায়েলে | 320 | 아니요 | https://www.youtube.com/playlist?list=plshvxzxnumvnduizmiavwwuuuuuuuuu0uex2bw |
| সহিহ সহিহ ওয়াত তারগিব | 200 | 아니요 | https://www.youtube.com/playlist?list=plshvxzxnumvpi5tg5cdowbcwlqjxcslbg |
| সহিহ সহিহ আমল | 151 | 아니요 | https://www.youtube.com/playlist?list=plshvxzxnumvmmuptusjykefywzttwkzyw |
| ঊপদেশ | 234 | 아니요 | https://www.youtube.com/playlist?list=plshvxzxnumvpzhcor1gdhv0fm-6je0gvm |
| রমযান রমযান জাল বিষয়ে দুর্বল হাদিসসমূহ হাদিসসমূহ | 36 | 아니요 | https://www.youtube.com/watch?v=mji1v7e5ai8&list=plshvxzxnumvoszibj3szrjxt1uzh_k6n7&index=10 |
| মুসনাদে মুসনাদে | |||
| জুজ জুজ কিরাত | |||
| সুনান সুনান দারিমী | |||
| তাহাবী তাহাবী | |||
| সুনান সুনান |
참조 :
APSIS Solutions Ltd.
Bengali.ai
