ai voice generation Download - ai voice generation Source Code Download

ai voice generation

Anderer Quellcode

1.0.0

Herunterladen

AI Powered Voice Chat Demo

Von tyingshoelaces.com

Überblick

Dies ist eine einfache Version der Sprachfunktionalität von OpenAI mit kostenlosen APIs. Mit dieser Demo können Sie mit LLMs sprechen, zuhören und sich unterhalten.

Original Blog -Beitrag ist hier: - Blog: Blog -Beitrag YouTube Video Explarer ist hier: YouTube Video

Fühlen Sie sich frei zu spielen!

Tech Stack

LLM Host: Groq
LLM: LLAMA 3
TTS: Deepgram
STT: Sprachrekognitionsapi
Web Framework: NextJS (React Front-End, Express API)

Wie man benutzt

Laden Sie das Repo herunter
npm i
Setup .Env.Local mit Deepgram_API_KEY und CREQ_API_KEY
NPM Run Dev

Möglicherweise möchten Sie alle Eingabeaufforderungen bearbeiten, um den Ton der Antwort zu ändern.

Die Architektur ist einfach, Stimme -> Text -> LLM -> Text -> Stimme. Rag und alle möglichen lustigen kreativen Dinge können verwendet werden, um die LLM aufzupeppen.

Hinweise und Tricks

Sie möchten wahrscheinlich die Sprachrekognition für Whisper AI ausschalten, wenn Sie nicht-chrome APIs oder etwas Stabileres möchten.

In der Audioplayer sind viele Investitionen in die Behandlung des Staates erforderlich, was für diese Demo nicht erforderlich ist.

Das Spielen mit den Eingabeaufforderungen und dem Kontext, der an COQ geht, ist der Schlüssel für die Personalisierung.

Kontaktieren Sie mich für Feedback!

Was ich getan habe

Ich habe eine Demo gebaut, in der Sie können:

Sprechen Sie mit dem WebSpeechRecognitionapi in den Browser.
Streamen Sie den transkribierten Text zur Verarbeitung in COQ.
Streamen Sie die Antwort von GROQ auf Deepgram für die Umwandlung von Text zu Sprache.
Spielen Sie die generierte Audio -Reaktion im Browser.

NEXTJS: ★★★★★ - Wunderbare Technologie, vereinfacht die Kunden- und Serverentwicklung.
GROQ: ★★★★★ - Neue Benchmarks in Geschwindigkeit und Kosten.
LLAMA3: ★★★★ ☆ - Bemerkenswerter Unterschied zu gpt -io, ideal für billige Anfragen und Demos.
Deepgram: ★★★ ☆☆ - Großzügige Startkredite, gute Latenz. Immer noch grün wie ein Techniker.