Voice Based AI Assistant with ChatGPT on Raspberry Pi

CENG4480最终项目 - 基于语音的AI助理在Raspberry Pi上

该项目是使用Openai的Chatgpt和Raspberry Pi上的基于语音的AI助手实施的。助手听唤醒单词“ Hey Ras Pi”，然后处理用户的查询，提供适当的响应。该项目演示了如何整合多种语言模型和API，以创建更健壮和上下文感知的AI助手。

特征

• 使用豪猪检测唤醒单词
• 用Google语音识别的语音识别
• 基于AI的聊天使用Chatgpt和非正式的Bing API
• 对英语，普通话和广东话的多语言支持
• 使用Google文本对语音（GTTS）的文本到语音
• 基于对话历史的Chatgpt和Bing的上下文感知互动
• 使用自定义NLP功能过滤时敏感问题过滤

安装

1. 克隆存储库

git clone https://github.com/yourusername/Voice-Based-AI-Assistant-with-ChatGPT-on-Raspberry-Pi.git
cd Voice-Based-AI-Assistant-with-ChatGPT-on-Raspberry-Pi

2. 更新并安装Raspberry Pi软件包：

sudo apt-get update
sudo apt-get upgrade
chmod +x install_dependencies.sh
./install_dependencies.sh

3. 设置虚拟环境并激活它

python3 -m venv env
# on Pi
source env/bin/activate
# on Windows
./env/bin/activate

4. 安装所需的软件包

pip install -r requirements.txt
python -m spacy download en_core_web_sm

配置

在运行项目之前，您需要使用API​​键在src目录中创建一个config.py文件。使用提供的config_example.py作为模板，然后填写必要的信息。

Openai API

请参阅https://platform.openai.com/examples

PICOVOICE访问密钥

从PICOVOICE控制台获取PICOVOICE访问键。将访问键添加到config.py文件中。

Bing API

该项目使用来自EggeGPT的非正式Bing API。要生成一个cookie.json文件供bing api使用，请按照边缘存储库中的说明进行操作。
准备好config.py和cookie.json文件后，您可以继续运行该项目。

音频设置

请参阅https://www.youtube.com/watch?v=vemzn5rgxbw&ab_channel=assemblyai

用法

1. 运行主脚本：

python main.py

2. 助手将听唤醒单词“嘿ras pi”。一旦检测到，它将提示您会发出查询。

3. 助手将使用Chatgpt和Bing API处理您的查询，并提供适当的响应。

目录结构

 .
├── ./.gitignore
├── ./README.md
├── ./cookies.json
├── ./env
├── ./install_dependencies.sh
├── ./main.py
├── ./models
│   ├── ./models/Hey-Ras-Pi_en_raspberry-pi_v2_1_0.ppn
│   ├── ./models/Hey-Ras-Pi_en_raspberry-pi_v2_1_0.zip
│   └── ./models/alexa_windows.ppn
├── ./output.mp3
├── ./requirements.txt
└── ./src
    ├── ./src/bing.py
    ├── ./src/config.py
    ├── ./src/config_example.py
    ├── ./src/gpt.py
    ├── ./src/nlp.py
    ├── ./src/speech_to_text.py
    ├── ./src/text_to_speech.py
    ├── ./src/translator.py
    └── ./src/wake_up_detect.py
└── ./wake_up_sound.wav

样本输出