Le 10 mars 2025, la communauté technologique a inauguré une technologie révolutionnaire appelée TrajectoryCrafter, une innovation qui a rapidement attiré une attention généralisée dans le domaine de la création de vidéos. TrajectoryCrafter, basé sur des modèles de diffusion, peut déduire et générer des perspectives complètement nouvelles à partir de vidéos monoculaires à vue unique, apportant des possibilités sans précédent de post-production vidéo.
La technologie principale de la trajectoire de la trajectoire réside dans ses puissantes capacités de redirection de perspective. Les vidéos monoculaires traditionnelles sont limitées par une seule perspective de caméra, et les créateurs ne peuvent souvent pas ajuster l'angle de prise de vue ou la façon dont ils utilisent le miroir en post-production. Cependant, TrajectoryCrafter, grâce à la technologie d'apprentissage en profondeur du modèle de diffusion, peut analyser le contenu vidéo et déduire des informations spatiales tridimensionnelles, permettant aux utilisateurs d'ajuster librement la position et l'angle de la caméra à des stades ultérieurs. Qu'il soit tourné autour d'un objet, en capturant les détails avec l'objectif plus près ou en étendant l'objectif pour montrer une vue panoramique, cette technologie peut être facilement réalisée. Ce qui est encore plus excitant, c'est qu'il soutient même un effet spécial similaire au "temps de balle" - le temps de congélation, tout en permettant à l'objectif de tourner autour du sujet, apportant une expérience visuelle très percutante.
De plus, TrajectoryCrafter prend en charge le réglage de la caméra à six degrés de liberté (6DOF), ce qui signifie que l'utilisateur peut non seulement contrôler le mouvement vers l'avant, vers l'arrière, la gauche et la droite de l'objectif, mais également ajuster les angles de pas, de lacet. Cette flexibilité offre aux éditeurs vidéo une liberté créative sans précédent. Par exemple, une vidéo simple prise par un téléphone mobile, qui peut être transformé en une image dynamique multi-angles qui semble être prise par un équipement de photographie professionnel.
Les développeurs de technologies présentent plusieurs cas impressionnants sur les pages publiques. Par exemple, dans une vidéo monoculaire enregistrant une performance de rue, la trajectoire de trajectoire génère avec succès une photo d'observation des artistes sous différents angles, et simule même l'effet mobile de la lentille de passer lentement d'un angle bas à une altitude élevée. La vidéo de démonstration montre également que la technologie est capable de gérer des scénarios dynamiques complexes, garantissant que les perspectives générées maintiennent la cohérence du temps et de l'espace.
Actuellement, le code et la démonstration de TrajectoryCrafter ont été publiés en ligne pour que les développeurs et les chercheurs puissent vivre et tester. L'avènement de cette technologie promeut non seulement l'avancement de l'intelligence artificielle dans le domaine de la génération de vidéos, mais fournit également des outils plus créatifs pour les utilisateurs ordinaires. Les initiés de l'industrie prédisent que la trajectoire de trajectoire peut changer la façon dont la courte création vidéo, le cinéma et la post-production télévisée et même le contenu de la réalité virtuelle sont générés.
TrajectoryCrafter Site officiel: https://trajectorycrafter.github.io/
TrajectoryCrafter Essai en ligne: https://huggingface.co/spaces/doubiiu/trajectorycrafter