JARVIS

자비스

자신의 목소리 개인 비서 : 웹 인터페이스에 표시되는 LLM에서 음성으로 문자를 보내십시오.

작동 방식

1. ? 사용자는 마이크에 말합니다
2. deepgram을 사용하여 음성이 텍스트로 변환됩니다
3. ? 텍스트는 OpenAi의 GPT-3 API로 전송되어 응답을 생성합니다.
4. ? elevenlabs를 사용하여 응답이 음성으로 변환됩니다
5. ? 연설은 Pygame을 사용하여 재생됩니다
6. 대화는 Taipy를 사용하여 웹 페이지에 표시됩니다

비디오 데모

요구 사항

파이썬 3.8-3.11

다음 API 키가 있는지 확인하십시오.

• 딥 그램
• Openai
• elevenlabs

설치 방법

1. 저장소를 복제하십시오

git clone https://github.com/AlexandreSajus/JARVIS.git

2. 요구 사항을 설치하십시오

pip install -r requirements.txt

3. 루트 디렉토리에서 .env 파일을 만들고 다음 변수를 추가하십시오.

DEEPGRAM_API_KEY=XXX...XXX
OPENAI_API_KEY=sk-XXX...XXX
ELEVENLABS_API_KEY=XXX...XXX

사용 방법

1. Web 인터페이스를 시작하려면 display.py 실행하십시오

python display.py

2. 다른 터미널에서 jarvis.py 실행하여 음성 어시스턴트를 시작하십시오.

python main.py

• 준비가되면 웹 인터페이스와 터미널이 모두 Listening...
• 이제 마이크에 말할 수 있습니다
• 말하기를 중단하면 Stopped listening 됩니다
• 그런 다음 요청 처리를 시작합니다
• 응답이 준비되면 Speaking...
• 응답은 웹 인터페이스에 재생되고 표시됩니다.

예는 다음과 같습니다.

 Listening...
Done listening
Finished transcribing in 1.21 seconds.
Finished generating response in 0.72 seconds.
Finished generating audio in 1.85 seconds.
Speaking...

 --- USER: good morning jarvis
 --- JARVIS: Good morning, Alex! How can I assist you today?

Listening...
...