CustomChar

CustomChar - Karakter AI yang disesuaikan

• Repositori: https://github.com/nrl-ai/customchar.
• Dibangun dengan: GGML, llama.cpp (llm, dengan llama-v2), whisper.cpp (pengenalan suara).

Karakter AI Anda yang disesuaikan - asisten pribadi pada perangkat keras apa pun! Proyek ini bertujuan untuk menjadi kerangka kerja untuk memungkinkan pembuatan karakter AI yang dapat digunakan dalam game, simulasi, asisten virtual, dan aplikasi lain tanpa tergantung pada platform tertentu, layanan cloud, atau perangkat keras khusus.

2. Pembaruan

• 2023-08-06: Muat konfigurasi karakter dari file.
• 2023-07-30: Rekam video dengan "Rekam video" dan "Stop Recording".
• 2023-07-30: Menambahkan OpenCV + tampilan kamera.
• 2023-07-29: Menambahkan pelaksana plugin untuk membuka aplikasi.
• 2023-07-25: Ditambahkan UI dengan iMGUI tersayang.
• 2023-07-23: Situs web dokumentasi online di https://docs.customchar.com.
• 2023-07-22: Obrolan suara dengan model Llama-V2 Anda. TTS hanya didukung pada macOS.

3. Fitur

• Bangun karakter AI dari database pengetahuan:
  • Llamacpp untuk llm. Mengobrol dengan llama-v2 di semua platform .
  • Pengindeksan Pengetahuan dan Pencarian (EmbedDB + SQLite).
  • Cari Pengetahuan DB untuk ditambahkan ke prompt.
• Bicaralah dengan karakter Anda ??? :
  • Stt dengan whisper.cpp . Sekarang mendukung pengenalan suara di semua platform .
• Mendengar dari karakter Anda ??? :
  • TTS dengan "Say" di MacOS. Catatan : "katakan" tidak tersedia di platform lain (Windows, Linux)
  • Tts dengan kulit kayu.cpp. Diharapkan tersedia di semua platform.
• Plugin Executor:
  • Buka aplikasi
  • Rekam video
• Mesin persepsi untuk melihat dunia melalui kamera ??? "
  • Dukung video penangkapan
  • Deteksi Objek
• Tambahkan GUI untuk interaksi karakter.
  • IMGUI sayang
  • GUI berbasis web
• Tambahkan GUI untuk pembuatan karakter.
• Buat karakter virtual yang dapat digunakan dalam game, simulasi, dan aplikasi lainnya.
  • Iron Man (WIP)
  • Batman
  • Superman
• Tambahkan binding ke bahasa lain:
  • Python
  • C# (Unity)
  • JavaScript (on-browser)

4. Build

Klon Repositori:

git clone https://github.com/nrl-ai/CustomChar --recursive
cd CustomChar

Instal dependensi:

• Cmake
• C ++ 14 Compiler

Di macOS: menggunakan homebrew

brew install sdl2 glew glfw3
brew install opencv
brew install ffmpeg # For video recording

Di Ubuntu:

sudo apt-get install libsdl2-dev libglew-dev libglfw3-dev
sudo apt-get install libopencv-dev
sudo apt-get install ffmpeg # For video recording

Di Windows: Menggunakan VCPKG, Git Bash, dan FFMPEG.

vcpkg install sdl2:x64-windows glew:x64-windows glfw3:x64-windows
vcpkg install opencv[contrib,nonfree,ffmpeg,ipp]:x64-windows --recurse

Bangun CustomChar yang dapat dieksekusi:

mkdir build
cd build
cmake ..
make

5. Penggunaan

Unduh model sebelum menjalankan program:

bash scripts/download-models.sh

Jalankan program:

./customchar

6. Bangun dokumentasi

• Langkah 1: Instal Doxygen terlebih dahulu.

• Langkah 2: Bangun dokumentasi:

doxygen Doxyfile.in

• Langkah 3: Menyebarkan dokumentasi HTML dari docs/_build/html .

• Langkah 4: Dokumentasi terbaru kami digunakan di https://docs.customchar.com.

7. Kontribusi

Kami menyambut semua kontribusi untuk proyek ini.

• Untuk gaya pengkodean, silakan ikuti gaya kode yang ada.
• Instal format dentang untuk memformat kode secara otomatis.
• Instal pra-komit untuk pengait format otomatis atau jalankan scripts/format-code.sh untuk memformat kode.

pre-commit install # Install pre-commit hook
bash scripts/format-code.sh # Format code (C++ styling) 

8. Sejarah Bintang

9. Referensi

• Spinner: https://github.com/dalerank/imspinner.
• GGML: https://ggml.ai/.
• llama.cpp: https://github.com/ggerganov/llama.cpp.
• Whisper.cpp: https://github.com/ggerganov/whisper.cpp.
• Llama-v2: https://ai.meta.com/llama/.