Bytedance의 최신 초상화 애니메이션 기술 X-Portrait2는 매우 낮은 비용과 고효율로 애니메이션 제작 분야에 혁신을 가져 왔습니다. 이 기술에는 복잡한 모션 캡처가 필요하지 않으며, 정적 인물 사진과 성능 중심 비디오 만 생성되어 생생한 애니메이션 비디오를 생성하여 애니메이션 제작 프로세스를 크게 단순화 할 수 있습니다. 그것의 핵심은 고급 표현 인코더 모델에 있으며, 미묘한 표현 변화를 정확하게 캡처하고 마이그레이션 할 수 있으며, 삐걱 거리는 혀와 혀를 붙이는 것과 같은 복잡한 표현조차도 완벽하게 제시되어 애니메이션의 충실도와 표현력을 보장 할 수 있습니다.
최근 Bytedance는 최신 초상화 애니메이션 기술 X-Portrait2를 출시하여 매우 낮은 비용과 효율적인 방식으로 표현적이고 사실적인 캐릭터 애니메이션을 만들기위한 것을 목표로했습니다. 사용자는 정적 인물 사진 및 성능 중심 비디오 만 제공하면되며 X-Portrait2는 비디오의 표현식을 초상화로 전송하여 애니메이션 비디오를 생성하여 전통적인 모션 캡처 및 캐릭터 애니메이션의 복잡한 프로세스를 단순화 할 수 있습니다.
이 기술의 핵심은 대규모 데이터 세트에 대해 교육을받은 고급 이모티콘 인코더 모델에 있으며 입력의 작은 표현식을 암시 적으로 인코딩 할 수 있습니다. 강력한 생성 확산 모델과 결합하여 X-Portrait2는 배우의 미묘한 얼굴 표정을 전달하는 부드럽고 표현적인 비디오를 생성 할 수 있으며, 삐걱 거리는 소리, 혀를 튀기고, 뺨을 부풀어 오르고, 눈살을 찌푸 리도록 도전적인 표현을 전달할 수 있습니다. 동시에, 생성 된 비디오는 감정적 성능에서 높은 충실도를 유지합니다.
이모티콘 인코더를 훈련시킬 때 개발 팀은 외관과 움직임의 강력한 분리를 보장하여 인코더가 비디오의 표현식과 관련된 정보에 집중할 수 있습니다. 이 디자인은 모델이 교차 스타일 및 크로스 도메인 표현식 마이그레이션을 달성 할 수 있으며 실제 스토리 텔링, 캐릭터 애니메이션, 가상 에이전트 및 시각 효과와 같은 다양한 장면에 적합합니다.
X-Portrait 및 Runway Act-One과 같은 최첨단 방법과 비교할 때 X-Portrait2는 빠른 헤드 움직임에서 정확도가 높아지고, 고품질 애니메이션 컨텐츠 제작을위한 작은 표현 변화 및 개인적인 정서적 전송이 중요합니다. 애니메이션 및 영화 제작의 애니메이션 컨텐츠로
주소 : https://byteaigc.github.io/x-portrait2/
X-Portrait2 기술의 출현은 초상화 애니메이션 기술의 또 다른 도약을 보여줍니다. 고 효율, 저렴한 충실도는 애니메이션 제작 산업에 큰 변화를 가져올 것이며 영화 및 텔레비전, 게임 및 기타 분야에서 널리 사용될 것으로 예상됩니다. . 자세한 내용은 프로젝트 주소를 방문하십시오.