El equipo del Laboratorio de Visión y Aprendizaje de la Universidad Nacional de Singapur ha desarrollado una herramienta distribuida de generación de videos largos llamada Video-Infinity. Esta herramienta rompe el cuello de botella de la tecnología de generación de videos largos existente y ha atraído mucha atención por su eficiencia, conveniencia y potentes funciones. . Puede generar rápidamente videos largos de alta calidad en un entorno de múltiples GPU sin modelos de capacitación adicionales, lo que acorta significativamente el tiempo de generación de videos y mejora en gran medida la eficiencia de producción. Los usuarios pueden satisfacer sus necesidades de generación de video personalizadas mediante una configuración simple y optimizar la calidad del video mediante el ajuste de parámetros.
Entrada del producto: https://top.aibase.com/tool/video-infinity
Esta herramienta es distribuida, de alta velocidad y sin capacitación. Se instala utilizando el entorno conda y es fácil de usar. Los usuarios pueden realizar la configuración básica, la configuración de canalización y la configuración de Video-Infinity según sea necesario para lograr diferentes necesidades de generación de video.
Al mismo tiempo, para evitar la pérdida de información de alta frecuencia, se recomienda establecer la suma del número de fotogramas de contexto local y el número de fotogramas de contexto global del modelo de Atención por debajo de 24 para mantener la calidad y la estabilidad del vídeo.
Al comparar los resultados experimentales, esta tecnología no sólo tiene ventajas obvias en la cantidad de cuadros de video, sino que también funciona bien en términos de costo de tiempo. El equipo técnico afirmó que su método logró este logro con el soporte de 8 GPU Nvidia Ada6000 y el paso de muestreo se estableció en 30.
Los investigadores de esta tecnología también realizaron experimentos de confrontación para analizar los efectos del paralelismo de clips y la atención de doble alcance mediante ablación. Los resultados mostraron que estos dos factores tienen un impacto significativo en la generación de video. Además, esta tecnología también admite múltiples indicaciones (Multi-Prompts), que pueden lograr transiciones suaves de fondos, estilos y temas, brindando más posibilidades para la generación de videos.
Reflejos:
⭐ Esta tecnología puede generar un vídeo con 2300 fotogramas en 5 minutos, 100 veces más rápido que los métodos anteriores;
⭐ El paralelismo de clips y la atención de doble alcance tienen un impacto significativo en la generación de videos;
⭐ Admite múltiples indicaciones (Multi-Prompts) para lograr una transición fluida.
La aparición de Video-Infinity marca un gran avance en la tecnología de generación de vídeo de larga duración. Su velocidad de generación eficiente y operación conveniente traerán cambios revolucionarios a la producción de cine y televisión, creación de animación y otros campos, brindando a los usuarios una experiencia de creación de video más conveniente y eficiente. Esperamos seguir desarrollando esta tecnología en el futuro, brindando capacidades de generación de video más potentes a más usuarios.