ai voice generation

AI 전원 보이스 채팅 데모

tyingshoelaces.com에 의해

개요

이것은 무료 API를 사용한 OpenAI의 음성 기능의 간단한 버전입니다. 이 데모를 사용하면 LLM과 대화하고 듣고 대화 할 수 있습니다.

오리지널 블로그 게시물은 여기에 있습니다 : - 블로그 : 블로그 게시물 YouTube 비디오 설명자가 여기 있습니다 : YouTube 비디오

자유롭게 놀아주세요!

기술 스택

• LLM 호스트 : Groq
• LLM : 라마 3
• TTS : DeepGram
• STT : SpecipRecognition API
• 웹 프레임 워크 : Nextjs (반응 프론트 엔드, Express API)

사용 방법

1. 레포를 다운로드하십시오
2. npm i
3. SETUP .env.local heepgram_api_key 및 groq_api_key
4. NPM Run Dev

응답의 톤을 변경하기 위해 모든 프롬프트를 편집 할 수 있습니다.

아키텍처는 간단하고 음성 -> 텍스트 -> llm-> 텍스트 -> 음성입니다. 헝겊과 모든 종류의 재미있는 창조적 인 것들을 사용하여 LLM을 향상시킬 수 있습니다.

힌트와 트릭

비 초록 API 또는 더 안정적인 것을 원한다면 Whisper AI에 대한 SpeechRecognition을 전환하고 싶을 것입니다.

이 데모에는 필요하지 않은 오디오 배신자의 상태를 처리하는 데 필요한 투자가 많이 있습니다.

그로크에가는 프롬프트와 맥락을 가지고 노는 것이 개인화의 핵심입니다.

피드백을 받으려면 저에게 연락하십시오!

내가 한 일

나는 당신이 할 수있는 곳에 데모를 만들었습니다.

1. WebSpeechRecognitionApi를 사용하여 브라우저에 문의하십시오.
2. 전사 된 텍스트를 처리를 위해 Groq로 스트리밍하십시오.
3. 텍스트 음성 변환을 위해 Groq에서 DeepGram으로의 응답을 스트리밍하십시오.
4. 브라우저에서 생성 된 오디오 응답을 재생하십시오.

• Nextjs : ★★★★★- 훌륭한 기술은 클라이언트 및 서버 측 개발을 단순화합니다.
• Groq : ★★★★★- 속도와 비용의 새로운 벤치 마크.
• llama3 : ★★★★ ☆- gpt -io와의 눈에 띄는 차이, 저렴한 요청 및 데모에 적합합니다.
• DeepGram : ★★★ ☆☆- 관대 한 시작 크레딧, 좋은 대기 시간. 기술로 여전히 녹색.

모래밭

• 데모 : AI 음성 생성 데모
• Github 리포지토리 : Github
• 비디오 : YouTube 비디오
• 블로그 : 블로그 게시물

---

Edward EJB503, 신발 끈 블로그 묶음