ai mv generator

AI-MV-generator

Bryan Agents adalah sistem multi-agen canggih yang dirancang untuk menghasilkan video musik berdasarkan lirik. Proyek ini menganalisis lirik dan menciptakan dorongan terperinci berdasarkan hasil analisis untuk menghasilkan gambar seperti cerita, pada akhirnya menghasilkan video musik gambar-ke-gambar. Sistem ini memanfaatkan API OpenAI, khususnya model GPT-4O untuk pemrosesan teks dan model Dall-E 3 untuk pembuatan gambar, untuk memberikan solusi ujung ke ujung untuk pembuatan konten video.

Fitur

• Lyric Analyze Agent : Menganalisis lirik dan mengelompokkannya untuk pemrosesan lebih lanjut.
• Agen Gaya : Menganalisis dan menerapkan gaya pada konten.
• Agen prompt : Menghasilkan petunjuk terperinci untuk membuat gambar latar belakang video musik menggunakan model GPT-4O.
• Image Agent : Membuat gambar berdasarkan prompt yang dihasilkan menggunakan model Dall-E 3.
• Agen logo : Menghasilkan logo dengan berbagai efek.
• Agen Video : Mengkompilasi gambar yang dihasilkan, logo, dan lirik skor menjadi video terakhir.

Prasyarat

Sebelum Anda mulai, pastikan Anda telah memenuhi persyaratan berikut:

• Python 3.8 atau lebih tinggi
• ffmpeg terpasang dan tersedia di jalur sistem Anda
• Paket Python yang diperlukan diinstal

Menginstal ffmpeg

Windows:

1. Unduh ffmpeg dari situs web resmi.
2. Ekstrak arsip yang diunduh ke folder pilihan Anda.
3. Tambahkan folder bin ke jalur sistem Anda:
   • Buka pencarian mulai, ketik "Env", dan pilih "Edit variabel lingkungan sistem".
   • Di jendela System Properties, klik tombol "Variabel Lingkungan".
   • Di jendela Variabel Lingkungan, temukan variabel Path di bagian "Variabel Sistem" dan pilih. Klik "Edit".
   • Klik "Baru" dan tambahkan jalur ke folder bin dari arsip ffmpeg yang diekstraksi. Klik "OK" untuk menerapkan perubahan.

MacOS:

1. Instal Homebrew jika Anda tidak menginstalnya. Buka terminal dan jalankan:

   /bin/bash -c " $( curl -fsSL https://raw.githubusercontent.com/Homebrew/install/HEAD/install.sh ) "

2. Gunakan Homebrew untuk menginstal ffmpeg :

   brew install ffmpeg

Linux:

1. Untuk distribusi yang berbasis di Debian (misalnya, Ubuntu), buka terminal dan jalankan:

   sudo apt update
   sudo apt install ffmpeg

2. Untuk distribusi berbasis Red Hat (misalnya, Fedora), buka terminal dan jalankan:

   sudo dnf install ffmpeg

Instalasi

1. Klon Repositori:

   git clone https://github.com/tanbryan/ai-mv-generator
   cd bryan-agent

2. Buat dan aktifkan lingkungan virtual (opsional):

   python -m venv venv
   source venv/bin/activate  # On Windows use `venvScriptsactivate`

3. Instal dependensi yang diperlukan:

   pip install -r requirements.txt

4. Siapkan Kunci API OpenAI Anda:

   Buat file .env di root proyek dan tambahkan tombol API OpenAI Anda:

    OPENAI_API_KEY = " your_openai_api_key_here " 

Penggunaan

1. Jalankan skrip utama:

   Pastikan file lirik (.lrc) dan file musik (.mp3) terletak di dalam direktori khusus. ❗️PLEASE Pastikan kedua file dinamai dalam format 'Songname-ArtistName.lrc atau .mp3' masuk ke skrip utama runner.py dan tambahkan jalur lengkap Anda ke kedua file: lalu jalankan:

   python runner.py

2. Eksekusi agen dan penghematan hasil:

   Setiap agen akan bekerja secara berurutan pada file lirik yang disediakan:

   • Lyricanalyzeagent : Menganalisis lirik dan mengelompokkannya untuk pemrosesan lebih lanjut. Hasilnya akan disimpan dalam file JSON dalam direktori lirik.
   • Styleagent : Menganalisis dan menerapkan gaya pada konten. Pengaturan gaya dasar akan disimpan dalam file JSON yang sama.
   • PromptAgent : Menghasilkan petunjuk terperinci untuk membuat gambar latar belakang video musik. Skrip akan berhenti setelah menghasilkan petunjuk bagi Anda untuk meninjaunya dalam file JSON yang dihasilkan. Setelah ditinjau, tekan Enter untuk melanjutkan.
   • ImageAgent : Membuat gambar berdasarkan permintaan yang dihasilkan dan menyimpannya di direktori yang ditentukan.
   • LogoAgent : Menghasilkan logo dengan berbagai efek.
   • VideoAgent : Mengkompilasi latar belakang dan menggulir lirik ke dalam video terakhir.

   Selama eksekusi, file agent_status.json akan dibuat di direktori base_agent. File ini melacak status masing -masing agen. Jika ada agen yang diselesaikan, statusnya akan diatur ke true . Anda selalu dapat mengatur status ke false untuk menjalankan kembali agen tertentu jika diperlukan.

3. Tinjau permintaan yang dihasilkan:

   Script akan berhenti setelah menghasilkan petunjuk. Tinjau mereka di file JSON yang dihasilkan dalam direktori lirik. Setelah ditinjau, tekan Enter untuk melanjutkan.

4. Lengkapi gambar dan pembuatan video:

   Ikuti petunjuk untuk menyelesaikan proses pembuatan gambar dan video.

Direktori Tes

Di direktori test , setelah berjalan, Anda akan menemukan output sampel berdasarkan "kisah cinta" oleh file lirik Taylor Swift:

• LoveStory-TaylorSwift.mp4 : Pratinjau video final yang dihasilkan.

Lovestory-taylorswift.mp4

• background.mp4 : Video latar belakang yang dihasilkan pra yang bersih.
• generated_prompts.json : File JSON yang berisi prompt detail yang dihasilkan untuk gambar.
• logo.png : Logo yang dihasilkan untuk video musik.
• results.json : File JSON yang berisi hasil dari masing -masing agen.
• background_images/ : Sebuah folder yang berisi gambar latar belakang yang dihasilkan berdasarkan prompt.

Sampel -sampel ini memberikan contoh output yang dapat Anda harapkan dari sistem.

Lisensi

Proyek ini dilisensikan di bawah lisensi MIT. Lihat file lisensi untuk detailnya.