voice ai js starter

フルスタックAI音声アシスタントスタータープロジェクト

デモビデオ

自分で試してみてください

https://voiceai-js-starter.vercel.app/

---

このレポは、シンプルなWebSocketベースのAI音声アシスタントのエンドツーエンドのスタータープロジェクトが含まれています。このプロジェクトは最速または最も堅牢であると主張しませんが、100％無料でオープンソースであるため、自由に変更して自分のプロジェクトのベースとして使用してください。

最速の構成を使用すると、ユーザーがスピーチを停止した後、〜1S TTFB（最初のバイトまでの時間）でアシスタント応答時間を確認できます。

ご質問やフィードバックがある場合は、お気軽に問題を開いてください。

特徴：

• （Openai、Deepgram、ElevenLabs、Playht）を含むいくつかの人気のあるTTS / STTプロバイダーのドロップインサポート
• WebSocket経由のリアルタイムオーディオストリーミングと再生
• 低遅延ブラウザベースの音声オーディオ検出
• 中断性
• 関数呼び出しサポート（デフォルトでは、補助コールエンディングがサポートされています）

クイックスタート

オプション1：npx create-voice-ai

このコマンドを実行して、新しい音声AIプロジェクトを作成するだけです。

 npx create-voice-ai

オプション2：このレポンをクローンします。

Web-Appを開始：

 cd web
npm install
npm run start

これによりlocalhost:3000でWeb-Appが開始されます

サーバーを開始：

次の環境変数を備えた.envファイルを作成する必要があります。 OPENAI_API_KEYだけで、本当に強力なフルスタックエージェントを立てることができます。

 OPENAI_API_KEY = <REQUIRED> # Required
ELEVEN_LABS_API_KEY = <OPTIONAL> # For use with ElevenLabs
DEEPGRAM_API_KEY = <OPTIONAL> # For use with Deepgram
PLAYHT_USER_ID = <OPTIONAL> # For use with PlayHT
PLAYHT_API_KEY = <OPTIONAL> # For use with PlayHT 

 cd server
npm install
npm run start

これによりlocalhost:8000でサーバーが開始されます

最初の構成

このプロジェクトで構成されたおもちゃの例は、L＆L Hawaiian BBQのシンプルな注文アシスタントです。独自のアシスタントを作成するには、 server/index.starter.jsをご覧になり、指示に従ってください。