Récemment, le domaine de la technologie de l'IA a inauguré une percée marquante. Légendes a officiellement publié son nouveau modèle d'IA Mirage, une technologie qui subvertit complètement la façon traditionnelle de synchronisation des lèvres et de génération de vidéos. Mirage peut générer des vidéos de style contenu généré par l'utilisateur (UGC) lues par des caractères virtuels en temps réel en analysant les scripts ou les clips audio. L'authenticité des expressions faciales et du langage corporel est bien au-delà de toute technologie précédente, marquant l'entrée de la création de vidéos IA dans une nouvelle ère.
La force centrale de Mirage réside dans sa capacité à «générer à partir de zéro». Contrairement aux méthodes de production vidéo traditionnelles, Mirage n'a pas besoin de s'appuyer sur des matériaux pré-enregistrés ou des outils complexes à lèvres. Il peut générer directement des caractères, des arrière-plans, une voix et même des scripts complets en fonction de l'audio ou du texte entré par l'utilisateur. Cette technologie innovante simplifie non seulement considérablement le processus de production vidéo, mais offre également aux créateurs une flexibilité sans précédent.
Selon l'équipe des légendes, Mirage utilise une technologie AI générative avancée et ses données de formation couvrent un grand nombre d'échantillons de performances humaines réelles. Cela rend les micro-expressions faciales et les mouvements naturels générés par Mirage si réalistes qu'il est difficile de dire la vérité. Par rapport à la technologie traditionnelle de synchronisation des lèvres et de doublage, les personnages générés par Mirage sont non seulement précis dans leur forme de lèvres, mais ont également des détails de haute qualité tels que les yeux et hochent de tête avec le contexte, améliorant davantage le réalisme de la vidéo.
Les initiés de l'industrie croient généralement que le lancement de Mirage aura un impact profond sur les domaines du marketing publicitaire et de la création de contenu. De la saisie des scripts à la génération d'une vidéo complète, l'ensemble du processus ne prend que quelques minutes, sans acteurs, studios ou modifications complexes, réduisant considérablement les coûts et le temps. En outre, Mirage prend actuellement en charge la génération de vidéos dans plus de 29 langues, ce qui donne une grande commodité à la promotion du marché mondial.
Les résultats des tests utilisateur montrent que les "caractères sans existants" générés par Mirage sont extrêmement naturels dans les vidéos UGC, et il est difficile pour les téléspectateurs de détecter même qu'ils sont des produits AI. Les légendes promettent d'optimiser davantage le modèle à l'avenir et d'ajouter plus d'options de personnalisation pour répondre aux besoins des différents utilisateurs. Ce saut dans la technologie des lèvres de l'IA améliore non seulement considérablement l'efficacité créative, mais porte également le réalisme des personnages virtuels à un nouveau niveau, qui mérite l'attention approfondie de l'industrie à son développement ultérieur.
Si vous êtes intéressé par cette technologie, vous pouvez l'essayer via le lien suivant: https://www.captions.ai/mirage