Facial caricature profile GIF

Imagen de perfil de caricatura de cara y creación de animación gif

Contenido

1. Antecedentes y propósito
2. Organizador/equipo ganó
3. Período de proyecto
4. Introducción del proyecto
   Curso de proyecto 4.1
   4.2 Descripción del modelo
5. INFERENCIA
6. Resultado
7. Presentación

1. Antecedentes y propósito

• Puede ser oneroso cargar su prueba en plataformas públicas como el perfil Github.
• Cree una caricatura que refleje las características del usuario en función de la imagen de la cara real y la convierta en una animación GIF.

2. Organizador/miembro del equipo

• Organizador/Organizador: Kookmin University AI Big Data Convergence Management Society X: AI

• Un total de 5 personas [Kwon Min -Ji, Kim Seo -Ryeong, Kim Jin -Ha. Kwang -yeol Yoo (líder del equipo), Cho hyun -sik]

3. Período del proyecto

• 2024.07 ~ 2024.08 (2 meses)

4. Introducción del proyecto

4.1. Proceso de proyecto

1. Use Sam para crear máscaras.
2. En la máscara generada, solo la máscara de la parte que desea aplicar en la conversión de estilo se ingresa en el Styletransfer.
3. DiffStyler entra en fotos de la cara del usuario, imágenes de estilo y máscara para crear una caricatura que refleje el estilo.
4. El modelo Image2Video, LivePorTrait, ingresa a la imagen de la caricatura y un video de conducción para generar el resultado final que lo convierte en GIF.

4.2. Modelo utilizado

Sam

Diffstyler

Image2video

5. Inferencia

1. clon git

 git clone https://github.com/yugwangyeol/2024_XAI_ADV_CV1_Toyproject.git

2. Descargue los paquetes necesarios.

 cd 2024_XAI_ADV_CV1_Toyproject
pip install git+https://github.com/facebookresearch/segment-anything.git
pip install gradio

# DiffStyler
cd DiffStyler
pip install -r requirements.txt
pip install "jax[cuda12_pip]==0.4.23" -f https://storage.googleapis.com/jax-releases/jax_cuda_releases.html

# LivePortrait
cd ../LivePortrait
pip install -r requirements.txt
cd ../

3. Ejecute el código a continuación para ejecutar Gradio.

 python main.py

• En el entorno Colab, puede ejecutar Gradio_main.ipynb y ejecutar el código a su vez.

6. Resultado

Original	Mascarilla	Imagen de estilo	Diffstyler

Video de conducción	ViveProtrait

Gradio

Presentación

X: AI Adv CV1 Team Toy Project Intermediate Anuncio.pdf

X: AI ADV CV1 Equipo Toy Project Final Anuncio.pdf

Presentación