Последняя портретная анимационная технология Bytedance X Portrait2 принесла инновации в сфере производства анимации со своей сверхнизкой стоимостью и высокой эффективностью. Эта технология не требует сложного захвата движения, и могут быть созданы только статические портреты и видео, ориентированные на производительность для создания жизненных анимированных видео, значительно упростить процесс производства анимации. Его ядро лежит в модели Expression Expression Encoder, которая может точно захватить и перенести тонкие изменения экспрессии, и даже сложные выражения, такие как надувание и толкание языка, могут быть идеально представлены, обеспечивая высокую точность и выразительность анимации.
Недавно Bytedance запустил новейшую портретную анимационную технологию X-Portrait2, стремясь создать выразительные и реалистичные анимации персонажей по ультра-низкому затратам и эффективным способам. Пользователям необходимо предоставлять только статические портретные изображения и видео, управляемые производительностью, а XPRTRAIT2 может генерировать анимационные видео, передавая выражения в видео на портреты, тем самым упрощая сложный процесс захвата традиционного движения и анимации символов.
Ядро этой технологии заключается в его современной модели эмоджи, которая была обучена крупномасштабным наборам данных и может неявно кодировать крошечные выражения на входах. В сочетании с мощной генеративной диффузионной моделью X Portrait2 может генерировать гладкие и выразительные видео, которые передают тонкие выражения лица актера, даже сложные выражения, такие как надувание, вытягивание языка, выпуклые щеки и хмурые. В то же время, сгенерированные видео также сохраняют высокую верность в эмоциональной производительности.
При обучении эмоджи -энкодера, команда разработчиков обеспечивает сильное разделение внешнего вида и движения, позволяя энкодеру сосредоточиться на информации, связанной с выражением в видео. Этот дизайн позволяет модели достичь миграции экспрессии поперечного стиля и междомена и подходит для различных сцен, таких как реальное рассказывание историй, анимация персонажей, виртуальные агенты и визуальные эффекты.
По сравнению с самыми современными методами, такими как X-Portrait и Act-One Act-One, X-Portrait2 демонстрирует более высокую точность в быстрых движениях головы, крошечные изменения выражения и личная эмоциональная передача для высококачественного создания содержания анимации имеет решающее значение, такое как анимационный контент в анимации и производстве кино.
Адрес: https://byteaigc.github.io/x-portrait2/
Появление технологии X-Portrait2 знаменует собой еще один скачок в технологии портретной анимации. Полем Для получения дополнительной информации, пожалуйста, посетите адрес проекта.