Das Learning and Vision Lab-Team der National University of Singapore hat ein verteiltes Tool zur Generierung langer Videos namens Video-Infinity entwickelt. Dieses Tool überwindet den Engpass der bestehenden Technologie zur Generierung langer Videos und hat aufgrund seiner Effizienz, Benutzerfreundlichkeit und leistungsstarken Funktionen große Aufmerksamkeit erregt . . Es kann in einer Multi-GPU-Umgebung ohne zusätzliche Schulungsmodelle schnell lange Videos in hoher Qualität generieren, wodurch die Zeit für die Videoerstellung erheblich verkürzt und die Produktionseffizienz erheblich verbessert wird. Benutzer können durch einfache Konfiguration personalisierte Anforderungen an die Videogenerierung realisieren und die Videoqualität durch Parameteranpassung optimieren.
Produkteingang: https://top.aibase.com/tool/video-infinity
Dieses Tool ist verteilt, schnell und schulungsfrei. Es wird mithilfe der Conda-Umgebung installiert und ist einfach zu verwenden. Benutzer können je nach Bedarf eine Grundkonfiguration, Pipeline-Konfiguration und Video-Infinity-Konfiguration durchführen, um unterschiedliche Anforderungen an die Videogenerierung zu erfüllen.
Um den Verlust hochfrequenter Informationen zu vermeiden, wird gleichzeitig empfohlen, die Summe der Anzahl lokaler Kontextrahmen und der Anzahl globaler Kontextrahmen des Aufmerksamkeitsmodells unter 24 festzulegen, um die Videoqualität und -stabilität aufrechtzuerhalten .
Beim Vergleich der experimentellen Ergebnisse weist diese Technologie nicht nur offensichtliche Vorteile bei der Anzahl der Videobilder auf, sondern schneidet auch hinsichtlich der Zeitkosten gut ab. Das technische Team gab an, dass ihre Methode diesen Erfolg mit der Unterstützung von 8 Nvidia Ada6000-GPUs erzielte und der Sampling-Schritt auf 30 eingestellt war.
Forscher dieser Technologie führten auch Konfrontationsexperimente durch, um die Auswirkungen von Clip-Parallelität und Dual-Scope-Aufmerksamkeit durch Ablation zu analysieren. Die Ergebnisse zeigten, dass diese beiden Faktoren einen erheblichen Einfluss auf die Videoerzeugung haben. Darüber hinaus unterstützt diese Technologie auch mehrere Eingabeaufforderungen (Multi-Prompts), wodurch reibungslose Übergänge von Hintergründen, Stilen und Themen erzielt werden können, was mehr Möglichkeiten für die Videogenerierung bietet.
Highlight:
⭐ Diese Technologie kann ein Video mit 2300 Bildern in 5 Minuten erzeugen, 100-mal schneller als frühere Methoden;
⭐ Clip-Parallelität und Dual-Scope-Aufmerksamkeit haben einen erheblichen Einfluss auf die Videoerzeugung;
⭐ Unterstützt mehrere Eingabeaufforderungen (Multi-Prompts), um einen reibungslosen Übergang zu erreichen.
Die Einführung von Video-Infinity markiert einen großen Durchbruch in der Technologie zur Erzeugung langer Videos. Seine effiziente Generierungsgeschwindigkeit und die praktischen Bedienmethoden werden revolutionäre Veränderungen in der Film- und Fernsehproduktion, der Animationserstellung und anderen Bereichen mit sich bringen und den Benutzern ein komfortableres und effizienteres Videoerstellungserlebnis bieten. Wir freuen uns darauf, diese Technologie in Zukunft weiterzuentwickeln und mehr Benutzern leistungsfähigere Videogenerierungsfunktionen zur Verfügung zu stellen.