Facial caricature profile GIF

顔の似顔絵のプロファイル画像とGIFアニメーションの作成

コンテンツ

1. 背景と目的
2. オーガナイザー/チームが勝ちました
3. プロジェクト期間
4. プロジェクトの紹介
   4.1プロジェクトコース
   4.2モデルの説明
5. 推論
6. 結果
7. プレゼンテーション

1。背景と目的

• GitHubプロファイルなどの公共プラットフォームに証明をアップロードすることは負担がかかる可能性があります。
• 実際の顔図に基づいてユーザーの特性を反映し、GIFアニメーションに変換する似顔絵を作成します。

2。オーガナイザー/チームメンバー

• オーガナイザー/オーガナイザー：Kookmin University AIビッグデータコンバージェンス管理協会X：AI

• 合計5人[Kwon Min -Ji、Kim Seo -Ryeong、Kim Jin -Ha。 Kwang -Yeol Yoo（チームリーダー）、Cho Hyun -sik]

3。プロジェクト期間

• 2024.07〜2024.08（2ヶ月）

4。プロジェクトの導入

4.1。プロジェクトプロセス

1. SAMを使用してマスクを作成します。
2. 生成されたマスクでは、スタイル変換で適用する部品のマスクのみがStyleTransferに入力されます。
3. diffstylerは、ユーザーの顔の写真、スタイルの画像、マスクに入り、スタイルを反映した似顔絵を作成します。
4. Image2VideoモデルLiveportraitは、似顔絵画像と運転ビデオを入力して、GIFに変換する最終結果を出力します。

4.2。使用されたモデル

サム

diffstyler

image2video

5。推論

1. gitクローン

 git clone https://github.com/yugwangyeol/2024_XAI_ADV_CV1_Toyproject.git

2. 必要なパッケージをダウンロードしてください。

 cd 2024_XAI_ADV_CV1_Toyproject
pip install git+https://github.com/facebookresearch/segment-anything.git
pip install gradio

# DiffStyler
cd DiffStyler
pip install -r requirements.txt
pip install "jax[cuda12_pip]==0.4.23" -f https://storage.googleapis.com/jax-releases/jax_cuda_releases.html

# LivePortrait
cd ../LivePortrait
pip install -r requirements.txt
cd ../

3. 以下のコードを実行して、グラデーションを実行します。

 python main.py

• Colab環境では、 Gradio_main.ipynbファイルを実行して、コードを順番に実行できます。

6。結果

オリジナル	マスク	スタイルイメージ	diffstyler

ドライビングビデオ	LiveProtrait

グラデーション

プレゼンテーション

X：AI ADV CV1チーム玩具プロジェクト中間発表。pdf

X：AI ADV CV1チーム玩具プロジェクト最終発表.pdf

プレゼンテーション