RasaChatbot with ASR and TTS

ASRとTTSを備えたRasachatbot

このリポジトリには、追加のサーバーやソケット接続を実行する必要なく、最先端のASR（自動音声認識）およびTTS（テキストツースピーチ）モデルとRASAチャットボットを組み込む試みが含まれています。

ブラウザの互換性

このプロジェクトでは、ブラウザはマイクなどの接続されたメディア入力デバイスへのアクセスを提供するため、大きな部分です。そのため、古いバージョンを使用しても、すべての主流のブラウザと互換性のあるサポートされているインターフェイスを使用する必要がありました。そのため、 AudioContext()インターフェイスを使用しました。 MediaRecorderのような他のインターフェイスは使用しませんでした。これは、Microsoft EdgeやSafariと互換性がないためです。また、 recorderJsのような他のプラグインはもはやサポートされていないため、他のプラグインを使用しませんでした。

これは、市場にある各主流ブラウザの最も受け入れられないバージョンのテーブルです。

デスクトップ							携帯
	クロム	角	Firefox	インターネットエクスプローラー	オペラ	サファリ	Android WebView	Android用のChrome	AndroidのFirefox	Androidのオペラ	iOSのサファリ	サムスンインターネット
サポート	✔✔️	✔✔️	✔✔️		✔✔️	✔✔️	✔✔️	✔✔️	✔✔️	✔✔️	✔✔️	✔✔️
最も受け入れ可能なバージョン	35	完全なサポート	25	サポートはありません	22	6	完全なサポート	35	26	22	完全なサポート	完全なサポート

問題

• このインターフェイスはインターネットエクスプローラーでは機能しません。また、そのステータスをEdgeで確認する必要があります。
• TTSインターフェイスには、RASAが複数のtextメッセージで応答するたびに問題があります... 1つのtextメッセージがある限り、複数の応答を完全に処理します。 RASAが複数のtextメッセージで応答する場合、すべてのtextメッセージが同時に再生されます。

謝辞

特別な感謝：

• 提供されたASRモデルをトレーニングするためのショーンナレン。
• すべてのトレーニングのためのESPNET組織は、提供されたTTSモデルを提供しました。
• 初期のブートストラップテンプレートを提供するためのサミモンライン
• Synth-JS JavaScriptプラグインのPatrick Roberts。
• このプロジェクト中に技術的な支援を求めているレモン・カマル...彼の指導は助けになっていた!!