新加坡国立大学Learning and Vision Lab团队研发出一款名为Video-Infinity的分布式长视频生成工具,该工具突破了现有长视频生成技术的瓶颈,以其高效、便捷和强大的功能备受瞩目。它无需额外训练模型,即可在多GPU环境下快速生成高质量长视频,显著缩短了视频生成时间,极大提升了生产效率。用户可通过简单的配置实现个性化视频生成需求,并通过参数调整优化视频质量。
产品入口:https://top.aibase.com/tool/video-infinity
这款工具具有分布式、高速和免训练等特点,采用 conda 环境进行安装,使用简便。用户可以根据需要进行基本配置、流水线配置和 Video-Infinity 配置,以实现不同的视频生成需求。
同时,为了避免高频信息丢失,建议将本地上下文帧数量与 Attention 模型的全局上下文帧数量之和设置在24以下,以保持视频质量和稳定性。
通过对比实验结果,该技术不仅在视频帧数上具有明显优势,而且在时间成本上也表现出色。技术团队表示,他们的方法在8个 Nvidia Ada6000GPU 的支持下实现了这一成就,而且采用的采样步骤设置为30。
该技术的研究人员还进行了对抗实验,通过消融分析 Clip Parallelism 和 Dual-scope Attention 的效果,结果显示这两个因素对视频生成具有显著影响。此外,该技术还支持多个提示(Multi-Prompts),可以实现背景、风格和主题的平滑过渡,为视频生成提供了更多可能性。
划重点:
⭐ 该技术能在5分钟内生成具有2300帧的视频,比先前方法快100倍;
⭐ Clip Parallelism 和 Dual-scope Attention 对视频生成具有显著影响;
⭐ 支持多个提示(Multi-Prompts),可以实现平滑过渡。
Video-Infinity 的出现,标志着长视频生成技术取得了重大突破。其高效的生成速度和便捷的操作方式,将为影视制作、动画创作等领域带来革命性的变化,为用户提供更便捷、更高效的视频创作体验。 期待未来该技术能进一步发展,为更多用户带来更强大的视频生成能力。