voice ai js starter

Fullstack AI Voice Assistant 스타터 프로젝트

데모 비디오

직접 시도하십시오

https://voiceai-js-starter.vercel.app/

---

이 저장소에는 간단한 WebSocket 기반 AI Voice Assistant를위한 엔드 투 엔드 스타터 프로젝트가 포함되어 있습니다. 이 프로젝트를 가장 빠르거나 가장 강력하다고 주장하지는 않지만 100% 무료 및 오픈 소스이므로 자신의 프로젝트의 기반으로 자유롭게 수정하고 사용하십시오.

가장 빠른 구성을 사용하면 사용자가 말하기를 중지 한 후 ~ 1s TTFB (첫 바이트 시간)의 조수 응답 시간을 볼 수 있습니다.

궁금한 점이나 피드백이 있으시면 언제든지 문제를 열어주십시오.

특징:

• (OpenAi, DeepGram, ElevenLabs, Playht)를 포함한 여러 인기있는 TTS / STT 제공 업체에 대한 드롭 인 지원
• WebSocket을 통한 실시간 오디오 스트리밍 및 재생
• 저도가 낮은 브라우저 기반 음성 오디오 감지
• 인터럽트
• 기능 호출 지원 (기본적으로 Assistatnt Call Ending이 지원됩니다)

빠른 시작

옵션 1 : NPX CREATE-VOICE-AI

이 명령을 실행하여 새로운 음성 AI 프로젝트를 만듭니다.

 npx create-voice-ai

옵션 2 :이 repo를 복제하십시오.

웹 애플 시작 :

 cd web
npm install
npm run start

이것은 localhost:3000 에서 웹 앱을 시작합니다

서버 시작 :

다음 환경 변수가있는 .env 파일을 작성해야합니다. OPENAI_API_KEY 만 있으면 정말 강력한 풀 스택 에이전트를 견딜 수 있습니다.

 OPENAI_API_KEY = <REQUIRED> # Required
ELEVEN_LABS_API_KEY = <OPTIONAL> # For use with ElevenLabs
DEEPGRAM_API_KEY = <OPTIONAL> # For use with Deepgram
PLAYHT_USER_ID = <OPTIONAL> # For use with PlayHT
PLAYHT_API_KEY = <OPTIONAL> # For use with PlayHT 

 cd server
npm install
npm run start

이것은 localhost:8000 에서 서버를 시작합니다

첫 번째 구성

이 프로젝트에서 구성된 장난감 예제는 L & L Hawaiian BBQ의 간단한 주문 보조원입니다. 자신의 조수를 만들려면 server/index.starter.js 를 살펴보고 지침을 따르십시오.