A equipe do Laboratório de Aprendizagem e Visão da Universidade Nacional de Cingapura desenvolveu uma ferramenta distribuída de geração de vídeos longos chamada Video-Infinity. Essa ferramenta rompe o gargalo da tecnologia existente de geração de vídeos longos e atraiu muita atenção por sua eficiência, conveniência e funções poderosas. . Ele pode gerar rapidamente vídeos longos de alta qualidade em um ambiente multi-GPU sem modelos de treinamento adicionais, reduzindo significativamente o tempo de geração de vídeo e melhorando significativamente a eficiência da produção. Os usuários podem atender às necessidades personalizadas de geração de vídeo por meio de configuração simples e otimizar a qualidade do vídeo por meio do ajuste de parâmetros.
Entrada do produto: https://top.aibase.com/tool/video-infinity
Esta ferramenta é distribuída, de alta velocidade e sem treinamento. É instalada no ambiente conda e é fácil de usar. Os usuários podem realizar configuração básica, configuração de pipeline e configuração de Video-Infinity conforme necessário para atender a diferentes necessidades de geração de vídeo.
Ao mesmo tempo, para evitar a perda de informações de alta frequência, recomenda-se definir a soma do número de quadros de contexto local e do número de quadros de contexto global do modelo de Atenção abaixo de 24 para manter a qualidade e estabilidade do vídeo. .
Ao comparar os resultados experimentais, esta tecnologia não só apresenta vantagens óbvias no número de quadros de vídeo, mas também tem um bom desempenho em termos de custo de tempo. A equipe técnica afirmou que seu método alcançou essa conquista com o suporte de 8 GPUs Nvidia Ada6000 e a etapa de amostragem foi definida como 30.
Os pesquisadores desta tecnologia também realizaram experimentos de confronto para analisar os efeitos do paralelismo de clipe e da atenção de escopo duplo por meio da ablação. Os resultados mostraram que esses dois fatores têm um impacto significativo na geração de vídeo. Além disso, esta tecnologia também suporta múltiplos prompts (Multi-Prompts), que podem conseguir transições suaves de fundos, estilos e temas, proporcionando mais possibilidades de geração de vídeo.
Destaque:
⭐ Esta tecnologia pode gerar um vídeo com 2300 frames em 5 minutos, 100 vezes mais rápido que os métodos anteriores;
⭐ Paralelismo de clipe e atenção de escopo duplo têm um impacto significativo na geração de vídeo;
⭐ Suporta vários prompts (Multi-Prompts) para obter uma transição suave.
O surgimento do Video-Infinity marca um grande avanço na tecnologia de geração de vídeos longos. Sua velocidade de geração eficiente e métodos de operação convenientes trarão mudanças revolucionárias na produção de filmes e televisão, criação de animação e outros campos, proporcionando aos usuários uma experiência de criação de vídeo mais conveniente e eficiente. Esperamos continuar a desenvolver esta tecnologia no futuro, trazendo capacidades de geração de vídeo mais poderosas para mais usuários.