JARVIS

Джарвис

Ваш собственный личный помощник голоса: голосовать на текст в LLM на речь, отображается в веб -интерфейсе.

Как это работает

1. ? Пользователь выступает в микрофон
2. ⌨ Голос преобразуется в текст, используя DeepGram
3. ? Текст отправляется в API GPT-3 от Openai, чтобы генерировать ответ
4. ? Ответ преобразуется в речь с использованием ElevenLabs
5. ? Речь играет с использованием pygame
6. Разговор отображается на веб -странице с использованием Taipy

Видео демонстрация

Требования

Python 3.8 - 3.11

Убедитесь, что у вас есть следующие ключи API:

• Дипграм
• Openai
• Одиннадлабс

Как установить

1. Клонировать репозиторий

git clone https://github.com/AlexandreSajus/JARVIS.git

2. Установите требования

pip install -r requirements.txt

3. Создайте файл .env в корневом каталоге и добавьте следующие переменные:

DEEPGRAM_API_KEY=XXX...XXX
OPENAI_API_KEY=sk-XXX...XXX
ELEVENLABS_API_KEY=XXX...XXX

Как использовать

1. Запустите display.py , чтобы запустить веб -интерфейс

python display.py

2. В другом терминале запустите jarvis.py , чтобы начать голосовой помощник

python main.py

• После готовности как веб -интерфейс, так и терминал покажут Listening...
• Теперь вы можете говорить в микрофон
• После того, как вы перестанете говорить, это покажет, Stopped listening
• Затем начнет обрабатывать ваш запрос
• Как только ответ будет готов, он покажет Speaking...
• Ответ будет воспроизведен и отображен в веб -интерфейсе.

Вот пример:

 Listening...
Done listening
Finished transcribing in 1.21 seconds.
Finished generating response in 0.72 seconds.
Finished generating audio in 1.85 seconds.
Speaking...

 --- USER: good morning jarvis
 --- JARVIS: Good morning, Alex! How can I assist you today?

Listening...
...