voice ai js starter

Fullstack AI語音助理入門項目

演示視頻

自己嘗試

https://voiceai-js-starter.vercel.app/

---

該回購包含一個端到端的啟動項目，用於簡單的基於WebSocket的AI語音助手。我不會聲稱這個項目是最快或最強大的，但它是100％免費和開源的，因此請隨時修改並將其用作您自己項目的基礎。

使用最快的配置，您可以在用戶停止說話後看到〜1S TTFB（第一個字節的時間）中的助手響應時間。

如果您有任何疑問或反饋，請隨時打開問題。

特徵：

• 對幾個受歡迎的TTS / STT提供商的支持支持（OpenAI，Deepgram，Elevenlabs，Playht）
• 實時音頻流和播放通過WebSocket
• 低延遲瀏覽器語音音頻檢測
• 中斷性
• 函數呼叫支持（默認情況下，支持呼叫結束）

快速開始

選項1：NPX Create-voice-ai

只需運行此命令即可創建一個新的語音AI項目。

 npx create-voice-ai

選項2：克隆此倉庫。

啟動Web-App：

 cd web
npm install
npm run start

這將啟動localhost:3000

啟動服務器：

您將需要創建一個具有以下環境變量的.env文件。只需使用OPENAI_API_KEY ，您就可以忍受一個非常強大的全棧代理。

 OPENAI_API_KEY = <REQUIRED> # Required
ELEVEN_LABS_API_KEY = <OPTIONAL> # For use with ElevenLabs
DEEPGRAM_API_KEY = <OPTIONAL> # For use with Deepgram
PLAYHT_USER_ID = <OPTIONAL> # For use with PlayHT
PLAYHT_API_KEY = <OPTIONAL> # For use with PlayHT 

 cd server
npm install
npm run start

這將在localhost:8000

您的第一個配置

該項目配置的玩具示例是L＆L Hawaiian BBQ的簡單訂購助手。要創建自己的助手，請查看server/index.starter.js並按照說明進行操作。