Gesichtskarikaturprofil Bild und GIF -Animationserstellung
Inhalt
- Hintergrund und Zweck
- Organisator/Team haben gewonnen
- Projektzeit
- Projekteinführung
4.1 Projektkurs
4.2 Modellbeschreibung - Schlussfolgerung
- Ergebnis
- Präsentation
1. Hintergrund und Zweck
- Es kann belastend sein, Ihren Beweis auf öffentlichen Plattformen wie GitHub -Profil hochzuladen.
- Erstellen Sie eine Karikatur, die die Eigenschaften des Benutzers basierend auf dem tatsächlichen Gesichtsbild widerspiegelt und es in eine GIF -Animation umwandelt.
2. Organisator/Teammitglied
Organisator/Organisator: Kookmin University AI Big Data Convergence Management Society X: AI
Insgesamt 5 Personen [Kwon Min -ji, Kim Seo -ryeong, Kim Jin -ha. Kwang -yeol Yoo (Teamleiter), Cho Hyun -sik]
3. Projektzeitraum
- 2024.07 ~ 2024.08 (2 Monate)
4. Einführung des Projekts
4.1. Projektprozess

- Verwenden Sie SAM, um Masken zu erstellen.
- In der erzeugten Maske wird nur die Maske des Teils, den Sie in der Stilumwandlung anwenden möchten, in den Styletransfer eingegeben.
- Diffstyler betritt die Gesichtsfotos, Stilbilder und Maske des Benutzers, um eine Karikatur zu erstellen, die den Stil widerspiegelt.
- Das Image2Video -Modell, LivePortrait, tritt in das Caricature -Bild und ein Fahrvideo ein, um das Endergebnis auszugeben, das es in GIF umwandelt.
4.2. Modell verwendet
Sam

Diffstyler

Image2Video

5. Inferenz
- Git -Klon
git clone https://github.com/yugwangyeol/2024_XAI_ADV_CV1_Toyproject.git
- Bitte laden Sie die erforderlichen Pakete herunter.
cd 2024_XAI_ADV_CV1_Toyproject
pip install git+https://github.com/facebookresearch/segment-anything.git
pip install gradio
# DiffStyler
cd DiffStyler
pip install -r requirements.txt
pip install "jax[cuda12_pip]==0.4.23" -f https://storage.googleapis.com/jax-releases/jax_cuda_releases.html
# LivePortrait
cd ../LivePortrait
pip install -r requirements.txt
cd ../
- Führen Sie den folgenden Code aus, um Gradio auszuführen.
- In der Colab -Umgebung können Sie
Gradio_main.ipynb ausführen und den Code nacheinander ausführen.
6. Ergebnis
| Original | Maske | Stilbild | Diffstyler |
|---|
 |  |  |  |
| Fahrvideo | LiveProtrait |
|---|
 |  |
| Gradio |
|---|
 |
Präsentation
X: AI Adv CV1 Team Toy Project Intermediate Ansage.pdf
X: AI Adv CV1 Team Toy Project -Projekt Finale Ankündigung.pdf
Präsentation