الصفحة الرئيسية>المتعلقة بالبرمجة>كود الذكاء الاصطناعي
تنزيل

مساعد صوت Glados

DIY Assistant Assistant استنادًا إلى شخصية Glados من سلسلة ألعاب الفيديو Portal.

ظهرت على:

؟ Hackday - مدونة التكنولوجيا

؟ أجهزة توم - أخبار التكنولوجيا

؟ PCGAMER - مجلة عبر الإنترنت

؟ ilta -sanomat - ثاني أكبر صحيفة في فنلندا

؟ Muropaketti - موقع الحوسبة الفنلندية

YouTube - قائمة تشغيل Glados Voice Assistant

اقرأ مقالة المشروع أولاً!

؟ مساعد صوت Glados - Henrirantanen.fi

وصف

  • مكتوبة في الغالب في بيثون
  • العمل قيد التقدم

❗ لن تعمل الإصدارات الجديدة من المساعد الصوتي على Raspberry Pi بسبب مجموعات تعليمات وحدة المعالجة المركزية المفقودة التي تحتاجها بعض البرامج النصية للنيابة. إذا كنت تتطلع للعب مع الإصدار القديم على Raspberry Pi الخاص بك ، فتحقق من فرع Raspberry.

  • YouTube Glados Voice Assistant | مقدمة
  • YouTube Glados Voice Assistant | البرمجيات - البرنامج التعليمي Python
  • تويتر؟ إنشاء مشروع مساعد الصوتي Glados

الميزات الرئيسية

  1. الكشف عن كلمات الزناد المحلي باستخدام الجيوب
  2. محرك Text-to-Spees المحلي Glados باستخدام نموذج Glados-TTS بواسطة R2D2Fish
  3. معالجة الكلام إلى النص باستخدام واجهة برمجة تطبيقات Google (في الوقت الحالي)
  4. ذاكرة التخزين المؤقت TTS المحلية لعينات صوتية شائعة تم إنشاؤها محليًا للحصول على إجابات فورية في المستقبل
  5. التحكم في العين المتحرك باستخدام الماكينات
  6. شاشة LCD مستديرة للعين لعرض قوام العرض

التكامل الضيق مع API المحلي لمساعد Home:

  • أرسل أوامر إلى مساعد المنزل
  • اقرأ وتحدث بيانات المستشعر
  • API الإخطار ، لذلك يمكن للمساعد المنزلي التحدث بالإشعارات من خلال Glados

ماذا يمكن أن تفعل:

  • ساعة
  • السيطرة على الأضواء والأجهزة
  • الطقس والتنبؤ
  • أضف أشياء إلى قائمة التسوق
  • قراءة معلومات المستشعر
  • الإجابات العشوائية السحر 8 الكرة
  • أخبر النكات
  • تحكم عليك ويكون يعني
  • التقاط الدهون المتقدمة
  • قم بتسجيل الأشياء وجمع بيانات التدريب محليًا

ملاحظة: يتم توفير الرمز كمرجع فقط.

نظرة عامة على خط أنابيب مساعد الصوت

متطلبات Ubuntu

تثبيت الأدوات 

 sudo apt-get update
sudo apt-get upgrade
sudo apt install python3-pip

تثبيت Pyaudio

هناك حاجة إلى Pyaudio لتشغيل ملفات الصوت. 

 sudo apt-get install portaudio19-dev

تثبيت الجيوبسفينس

تستخدم للكشف عن الكلمات الزناد في الوقت الحالي. 

 sudo apt-get install -y build-essential swig libpulse-dev libasound2-dev

تثبيت الكلام

تستخدم لتحويل الصوت إلى نص في الوقت الحالي. 

 sudo apt-get install flac

تثبيت مكتبات أخرى

قم بتثبيت وحدات Python من File.txt file 

 cd ~/glados-voice-assistant
sudo pip3 install -r requirements.txt

تثبيت Pytorch

انظر هنا: https://pytorch.org/get-started/locally/#start-locally

قم بتثبيت مساعد صوت Glados

1. اذهب إلى المنزل 

 cd ~

2. قم بتنزيل المصدر من Github

سيؤدي ذلك إلى تنزيل مساعد Glados Voice و TTS الفرعي. 

 git clone --recurse-submodules https://github.com/nerdaxic/glados-voice-assistant/

بعد ذلك ، يمكنك اللعب مع TTS ، وهذا يعمل بذاتها. 

 cd ~/glados-voice-assistant/glados_tts/
python3 glados.py

3. قم بتحرير ملف الإعدادات

ابحث عن معرف بطاقة الصوت: 

 python3 -m sounddevice

قم بإنشاء وتحرير ملف Settings.Env: 

 cp ~/glados-voice-assistant/settings.env.sample ~/glados-voice-assistant/settings.env && nano ~/glados-voice-assistant/settings.env

4. لتشغيل:

قم بتشغيل مساعد الصوت: 

 python3 ~/glados-voice-assistant/glados.py

يمكنك إضافة glados.py إلى ملف crontab الخاص بك أو تشغيله يدويًا. 

 crontab -e
@reboot python3 /home/username/glados-voice-assistant/glados.py

الاندماج في مساعد المنزل

لجعل أعمال تكامل مساعد المنزل ، تحتاج إلى تمكين واجهة برمجة التطبيقات في ملف تكوين مساعد المنزل وإنشاء رمز وصول طويل الأجل. أضف الرمز المميز و IP-Address لخادم Home Assistant في ملف Settings.Env.

configuration.yaml 

 # This will enable rest api
api :

# This will add GLaDOS as a notification provider. Replace with correct IP of GLaDOS.
notify :
  - name : glados
    platform : rest
    resource : http://192.168.1.XXX:5000/notify

الأجهزة

قائمة الأجهزة المرجعية ما الذي يتطور فيه NerDaxic ، قد لا تحتاج النماذج إلى أن تكون دقيقة. ليست فاتورة كاملة للمواد.

غرض وصف
المجلس الرئيسي الكمبيوتر المحمول الأساسي i7 مع 16 العربات من ذاكرة الوصول العشوائي
نظام التشغيل Ubuntu-20.04.3-Desktop-AMD64
متحكم Teensy 4 ، للسيطرة على LCD و Neopixels
أضواء العين Adafruit Neopixel من خلال فتحة 5 مم من خلال ضوء "REC"
أضواء العين Adafruit 16 x 5050 Neopixel Ring
عيون LCD 1.28 بوصة TFT LCD MODULE ROUND ، GC9A01 DRIVER SPI Interface 240 × 240

صوتي

يتم تشغيل Audio AMP من خط Raspberry GPIO 5V ولوحة Respeaker من USB لتجنب حلقات الأرض وقضايا الضوضاء.

غرض وصف
مضخم الصوت Adafruit Stereo 3.7W Class D Audio Audio Audio
مكبرات صوت Visaton FRS 7
واجهة الميكروفون والصوت Respeaker MIC Array v2.0

الميكانيكا

يتم تشغيل الميكانيكا من مصدر الطاقة الخاص بهم للسماح بمزيد من الطاقة للخدمات ومنع البني.

غرض وصف
مزود الطاقة Meanwell LRS-50-5 5V
وحدة التحكم المؤازرة Pololu Micro Maestro
مؤازرة: حركة العين 35 كجم DS3235 (زاوية التحكم 180)
سيرفو: الجفون 25 كجم DS3225 (زاوية التحكم 180)
مسامير مسامير مختلفة M3 و M4
الأسلاك الطائر 0.32 مم مربع/22 تشويش AWG
يوسع
معلومات إضافية
تطبيقات ذات صلة
نوصي لك
أخبار ذات صلة الكل