Официальный веб-сайт www.binance.com/zh-cn :введите официальный веб-сайт ☜☜
Приложение: ☞☞official App Download☜☜
Shanghai Jieyue Singchen Intelligent Technology Co., Ltd. недавно объявила о открытом исходном источнике своей последней разработки модели графического видео-Step-Video-Ti2V. Эта модель основана на обучении Step-Video-T2V с параметрами 30B. Он может генерировать 102 кадров, 5 секунд и 540p резолюционных видео. Он имеет две основные функции: управляемая амплитуда движения и управляемое движение линзы, особенно с точки зрения эффектов анимации. По сравнению с существующей видео-модели с открытым исходным кодом, Step-Video-Ti2V обеспечивает не только более высокий верхний предел в шкале параметров, но и его управляемая амплитуда движения также может сбалансировать динамику и стабильность результатов генерации видео, предоставляя создателям более гибкий выбор.
Во время разработки Step-Video-Ti2V команда выполнила две ключевые оптимизации. Во -первых, вводятся условия изображения для улучшения согласованности между сгенерированным видео и исходным изображением. В отличие от традиционного метода перекрестного амортизации, модель использует более прямой способ, напрямую сплайсируя размеры канала, непосредственно сплайсируя векторное представление, соответствующее первому кадру DIT, чтобы гарантировать, что сгенерированное видео очень соответствовало входному изображению. Во -вторых, модуль ADALN вводит информацию о динамической оценке видео, так что пользователи могут указывать различные уровни движения при генерации видео, точно управлять динамической амплитудой видео, тем самым уравновешивая динамику, стабильность и последовательность. Кроме того, команда также сделала специальные и точные маркеры предметных движений и движений линзы, еще больше улучшая производительность модели в динамике субъекта и эффектах зеркального движения.
Основные особенности Step-Video-Ti2V включают управляемая амплитуда движения, множественное управление зеркалами, превосходные эффекты анимации и поддержку для генерации с несколькими размерами. Пользователи могут свободно переключать динамические и стабильные изображения в соответствии со своими творческими потребностями и генерировать видео от базовых толчков, встряхивания, подъема и опускания до сложных зеркальных эффектов на уровне фильмов. Эта модель особенно выдающаяся в задачах анимации и очень подходит для сценариев приложений, таких как создание анимации и короткое видео -производство. В то же время он поддерживает несколько размеров видео, сгенерированных изображением, будь то горизонтальный, вертикальный или квадратный экран, он может удовлетворить потребности различных платформ.
Адрес опыта:
https://yuewen.cn/videos
GitHub:
https://github.com/stepfun-ai/step-video-ti2v
Github-comfyui:
https://github.com/stepfun-ai/comfyui-stepvideo