¿Alguna vez te ha molestado la complejidad de la producción de video y la dificultad de la edición posterior? Ahora, el equipo de Alibaba Tongyi Wan ha traído su última obra maestra: Vace, un modelo completo que integra la generación y la edición de videos, que cambiará completamente su experiencia de creación de video.
Uno de los aspectos más destacados de Vace es su potente capacidad de generación de videos en condicional. Simplemente describa la escena en su mente a través del texto, y Vace puede transformarla rápidamente en un video vívido. Es como tener un equipo de filmación profesional que está en espera en cualquier momento, lo que puede realizar eficientemente sus conceptos creativos, mejorando en gran medida la conveniencia y la eficiencia de la producción de video.
VACE no solo admite una variedad de métodos de edición flexibles, sino que también proporciona funciones ricas para satisfacer diferentes necesidades creativas. Por ejemplo, con la función de movimiento, puede controlar con precisión la trayectoria de movimiento de cualquier objeto en el video, ya sea el arco elegante de un pájaro o la ruta designada de un automóvil, Vace puede lograrlo fácilmente. Además, la función Swap-Anything le permite reemplazar el sujeto en el video como desee. Ya sea que esté convirtiendo el guepardo en el documental en un panda o cambiando instantáneamente al protagonista de la película comercial, Vace puede ayudarlo a lograr el "gran movimiento del mundo".
VACE también tiene la función de referencia, que puede aprender y aplicar el estilo del objeto de referencia que proporciona al tema del video. Ya sea que esté dando la textura de anime de los videos de la vida real o permitiendo a la gente común convertirse instantáneamente en los protagonistas de las pinturas artísticas, Vace puede lidiar fácilmente con ella. La función de expansión puede expandir de manera inteligente el contenido de la pantalla de video, resolver el problema de los ángulos de disparo limitados y hacer que el campo de la visión sea más amplio. La función de Animate-Anything puede hacer que las imágenes estáticas se muevan, y ya sea fotos antiguas o pinturas artísticas, puede traer nueva vitalidad bajo la magia de Vace.
Vale la pena mencionar que Vace también ha mostrado una fortaleza sobresaliente en la reenvolución de video. Admite varios modos, como retención de contenido, retención de estructura, retención de sujetos, retención de postura y retención de movimiento. Incluso los videos antiguos con imágenes borrosas y detalles perdidos se pueden reproducir bajo la reparación de Vace, como si el tiempo se remontara.
El modelo Vace del equipo de Alibaba Tongyi Wan, con sus poderosas funciones en la generación y edición de videos, sin duda mejorará enormemente la eficiencia y la diversión de la creación de videos. Es como un mago de video omnipotente, capaz de satisfacer el todo tipo de imaginaciones de los usuarios.
Aunque el modelo aún no se ha lanzado oficialmente, será de código abierto. La llegada de Vace traerá un cambio profundo al campo de la creación de contenido de video.
Enlace en papel: https://arxiv.org/pdf/2503.07598
Open Source Code: https://ali-vilab.github.io/vace-page/