Facial caricature profile GIF

Face Caricature Profil Image et Création d'animation GIF

Contenu

1. Contexte et but
2. Organisateur / équipe a gagné
3. Période du projet
4. Introduction du projet
   4.1 Cours de projet
   4.2 Description du modèle
5. INFÉRENCE
6. Résultat
7. Présentation

1. Contexte et objectif

• Il peut être contraint de télécharger votre preuve sur les plateformes publiques telles que le profil GitHub.
• Créez une caricature qui reflète les caractéristiques de l'utilisateur en fonction de l'image du visage réelle et la convertit en animation GIF.

2. Organisateur / membre de l'équipe

• Organisateur / Organisateur: Kookmin University AI Big Data Convergence Management Society X: AI

• Un total de 5 personnes [Kwon Min -Ji, Kim Seo -ryeong, Kim Jin -ha. Kwang -yeol Yoo (chef d'équipe), Cho Hyun -sik]

3. Période du projet

• 2024.07 ~ 2024.08 (2 mois)

4. Introduction du projet

4.1. Processus de projet

1. Utilisez SAM pour créer des masques.
2. Dans le masque généré, seul le masque de la pièce que vous souhaitez appliquer dans la conversion de style est entré dans le styletransfer.
3. DiffStyler entre dans les photos du visage de l'utilisateur, les images de style et le masque pour créer une caricature qui reflète le style.
4. Le modèle Image2Video, LivePortrait, entre dans l'image de caricature et une vidéo de conduite pour produire le résultat final qui le convertit en GIF.

4.2. Modèle utilisé

Sam

Diffstyler

Image2video

5. Inférence

1. clone git

 git clone https://github.com/yugwangyeol/2024_XAI_ADV_CV1_Toyproject.git

2. Veuillez télécharger les packages nécessaires.

 cd 2024_XAI_ADV_CV1_Toyproject
pip install git+https://github.com/facebookresearch/segment-anything.git
pip install gradio

# DiffStyler
cd DiffStyler
pip install -r requirements.txt
pip install "jax[cuda12_pip]==0.4.23" -f https://storage.googleapis.com/jax-releases/jax_cuda_releases.html

# LivePortrait
cd ../LivePortrait
pip install -r requirements.txt
cd ../

3. Exécutez le code ci-dessous pour exécuter Gradio.

 python main.py

• Dans l'environnement Colab, vous pouvez exécuter Gradio_main.ipynb et exécuter le code à tour de rôle.

6. Résultat

Original	Masque	Image de style	Diffstyler

Vidéo de conduite	Liveprotrait

Gradio

Présentation

X: AI ADV CV1 Équipe Toy Project Intermediate Intermediate Annonce.pdf

X: AI ADV CV1 Équipe Toy Project Final Annonce.pdf

Présentation