Avez-vous déjà été gêné par la complexité de la production vidéo et la difficulté de la post-édition? Maintenant, l'équipe Alibaba Tongyi Wan a apporté son dernier chef-d'œuvre - Vace, un modèle polyvalent qui intègre la génération de vidéos et l'édition, ce qui changera complètement votre expérience de création vidéo.
L'un des principaux points forts de VACE est sa puissante capacité de génération vidéo sur condition. Décrivez simplement la scène dans votre esprit à travers du texte, et Vace peut rapidement le transformer en une vidéo vive. C'est comme avoir une équipe de tournage professionnel qui est en attente à tout moment, ce qui peut réaliser efficacement vos concepts créatifs, améliorant considérablement la commodité et l'efficacité de la production vidéo.
VACE prend non seulement une variété de méthodes d'édition flexibles, mais offre également des fonctions riches pour répondre à différents besoins créatifs. Par exemple, avec la fonction de déplacement, vous pouvez contrôler avec précision la trajectoire de mouvement de tout objet dans la vidéo, que ce soit l'arc élégant d'un oiseau ou l'itinéraire désigné d'une voiture, VACE peut facilement y parvenir. De plus, la fonction de swap-tout vous permet de remplacer le sujet dans la vidéo comme vous le souhaitez. Qu'il s'agisse de transformer le guépard dans le documentaire en panda ou de changer instantanément le protagoniste du film commercial, Vace peut vous aider à réaliser le "grand mouvement du monde".
VACE a également la fonction de référence, qui peut apprendre et appliquer le style de l'objet de référence que vous fournissez au sujet vidéo. Qu'il s'agisse de donner une texture d'anime de vidéos réelles ou de permettre aux gens ordinaires de devenir instantanément les protagonistes des peintures artistiques, Vace peut facilement y faire face. La fonction d'étendue peut étendre intelligemment le contenu de l'écran vidéo, résoudre le problème des angles de prise de vue limités et rendre le champ de vision plus large. La fonction animée et toute la fonction peut faire bouger les images statiques, et qu'il s'agisse de vieilles photos ou de peintures artistiques, elle peut porter une nouvelle vitalité sous la magie de VACE.
Il convient de mentionner que VACE a également montré une force exceptionnelle dans la rediffusion vidéo. Il prend en charge divers modes tels que la rétention de contenu, la rétention de la structure, la rétention des sujets, la rétention de posture et la rétention de mouvement. Même de vieilles vidéos avec des photos floues et des détails perdus peuvent être reproduits sous la réparation de VACE, comme si le temps remonte.
Le modèle VACE de l'équipe Alibaba Tongyi WAN, avec ses fonctions puissantes dans la génération et l'édition vidéo, améliorera sans aucun doute considérablement l'efficacité et le plaisir de la création de vidéos. C'est comme un magicien vidéo omnipotent, capable de satisfaire toutes sortes d'imaginations des utilisateurs.
Bien que le modèle n'ait pas encore été officiellement lancé, il sera open source. L'arrivée de VACE apportera un changement profond dans le domaine de la création de contenu vidéo.
Lien papier: https://arxiv.org/pdf/2503.07598
Code open source: https://ali-vilab.github.io/vace-page/