Motor de inmediato temporal: Motor de avance cinematográfico local, de código abierto, Cinematic Motor + Video y Generación de Audio para GPU NVIDIA
## Ahora con guión personalizado 12B Hunyuanvideo con MMAUDIO incorporado para tarjetas de 80GB.
## Actualización masiva de las instrucciones a continuación que llegarán muy pronto (12/11/2024)
Estoy buscando un asistente voluntario si está interesado en comunicarse con [email protected]; esto va a una versión webapp muy pronto.
Tabla de contenido
- Introducción
- Descripción general de las características
- Instalación
- Guía de inicio rápido
- Configuración de teclas API
- Modo de la historia: desatar narraciones épicas
- Casos de uso inspiradores
- Aprovechando el poder de COMFYUI
- Generación de videos locales usando cogvideo
- Únete al viaje de los laboratorios temporales
- Donaciones y apoyo
- Servicios adicionales ofrecidos
- Solicitud de atribución y cortesía
- Contacto
- Expresiones de gratitud
Introducción
Bienvenido al motor de inmediato temporal Un marco integral para construir variaciones por lotes o secuencias de historias para generadores de aviso de video. Esta idea fue original que comenzó como un flujo de trabajo cómodo de COGVideox, pero desde entonces se ha convertido en un marco modular que ha demostrado escalar con nuevos modelos fundamentales y tuberías.
Descripción general de las características
- Instalaciones cinematográficas de video : Adaptar cada aspecto de su escena, desde el tipo de cámara y la lente hasta la iluminación y el encuadre.
- Conciencia temporal : elija una década y las opciones de la cámara representarán ese tiempo, agregando profundidad y contexto a sus escenas.
- Variables dinámicas : ajuste la configuración como iluminación, movimiento de la cámara, iluminación, hora del día y más a través de opciones desplegables fáciles de usar.
- Modos especiales :
- Modo de la historia : mezcla sin problemas los incendios a través de los cuadros para crear narrativas cohesivas, lo que le permite crear historias épicas o cuentos íntimos.
- Modo de vacaciones : genere contenido de temporada adaptado a las vacaciones, perfecto para la marca y el marketing festivos.
- Modo Caos : agregue imprevisibilidad con el modo Caos.
- Configuración interconectada : experimente cómo las opciones como seleccionar un estilo de arte antiguo influyen en otras variables como la paleta de colores y la textura, creando una salida cohesiva y auténtica.
- Compatibilidad multiplataforma : disponible para Windows y Linux
Instalación
Configurar el motor de inmediato temporal es simple y sin problemas, lo que le permite concentrarse en la creación en lugar de la configuración. Esta sección proporciona pasos de instalación para los usuarios de Windows .
Preparación del sistema
Guía de configuración de YouTube Parte 1:
- Sistema operativo : Windows 10 o posterior
- Python : versión 3.10.9
- Descargar Python Installer :
- Visite la página de descargas de Python.
- Descargue el instalador Python 3.10.9 para Windows.
- Instalar python :
- Ejecute el instalador :
- Haga doble clic en el archivo de instalador EXE descargado.
- Importante :
- Si ya tiene Python instalado :
- Tenga cuidado al agregar Python a la ruta, ya que puede sobrescribir su versión de Python existente en la ruta del sistema.
- Para evitar conflictos, puede instalar Python 3.10.9 sin agregarlo a la ruta. En su lugar, use el Python Launcher para Windows (
py ) para especificar la versión al ejecutar comandos.
- Si no tiene Python instalado :
- Marque la casilla "Agregar pitón a la ruta" en la parte inferior de la ventana del instalador.
- Haga clic en "Instalar ahora" .
- Verificar la instalación :
- Abra un nuevo símbolo del sistema.
- Correr:
- Deberías ver
Python 3.10.9 .
## Si desea que funcionen las capacidades de generación de videos, también necesitará un Python 3.12.4 local instalado. Si esto está en su lugar, el setup.py manejará todo. ## Si solo desea usar el motor y el generador de efectos de sonido, entonces está bien con solo 3.10.9, incluso si el setup.py se queja un poco.
Sistema operativo : Windows 10 o posterior
Python : versión 3.12.4
- Descargar Python Installer :
- Visite la página de descargas de Python.
- Descargue el instalador Python 3.12.4 para Windows.
- Instalar python :
- Ejecute el instalador :
- Haga doble clic en el archivo de instalador EXE descargado.
- Importante :
- Si ya tiene Python instalado :
- Tenga cuidado al agregar Python a la ruta, ya que puede sobrescribir su versión de Python existente en la ruta del sistema.
- Para evitar conflictos, puede instalar Python 3.10.9 sin agregarlo a la ruta. En su lugar, use el Python Launcher para Windows (
py ) para especificar la versión al ejecutar comandos.
- Si no tiene Python instalado :
- Marque la casilla "Agregar pitón a la ruta" en la parte inferior de la ventana del instalador.
- Haga clic en "Instalar ahora" .
- Verificar la instalación :
- Abra un nuevo símbolo del sistema.
- Correr:
- Deberías ver
Python 3.12.4 . - Sistema operativo : Windows 10 o posterior
- PY -3.12 es utilizado por importantes procesos de back -end de entorno de generación de videos.
GIT : instalado y configurado
- Instalar git :
- Descargue Git de Git para Windows.
- Ejecute el instalador con la configuración predeterminada.
- Verificar la instalación :
- Abra un nuevo símbolo del sistema.
- Correr:
- Debería ver la versión Git instalada.
GPU NVIDIA : GPU NVIDIA habilitada para CUDA para un rendimiento óptimo
- Asegúrese de tener una GPU NVIDIA con los últimos controladores.
CUDA Toolkit : Versión 11.8 Compatible con su GPU e instalada
- Instale el kit de herramientas CUDA :
- Descargue el kit de herramientas CUDA de la descarga de kit de herramientas CUDA.
- Ejecute el instalador y siga las instrucciones en pantalla.
- Verificar la instalación :
- Abra un nuevo símbolo del sistema y ejecute:
- Debería ver la información de la versión de herramientas de compilación CUDA.
FFMPEG : instalado y agregado a PATH del sistema
- Paso 1: haga clic aquí para descargar el archivo zip de la última versión.
- Paso 2: descomprima este archivo usando cualquier archivador de archivo como Winrar o 7Z.
- Paso 3: Cambie el nombre de la carpeta extraída a FFMPEG y muévala a la raíz de C: Drive.
-
setx /m PATH "C:ffmpegbin;%PATH%" - Verificar la instalación :
- Abra un nuevo símbolo del sistema y ejecute:
- Debería ver la información de la versión FFMPEG.
Ollama : Descargue desde la configuración de Ollama y siga las instrucciones en pantalla para instalar.
## [Guía de video de configuración Parte 2) [https://youtu.be/_8txlnwa9ak?si=eo73edqxafblqa_o]
Está listo para comenzar el proceso de configuración automatizado:
Clonar el repositorio
git clone https://github.com/TemporalLabsLLC-SOL/TemporalPromptEngine.git
Descargue manualmente el repositorio :
- Visite el repositorio de GitHub temporalPromptGenerator.
- Haga clic en el botón "Código" y seleccione "Descargar zip" .
- Extraiga el archivo ZIP descargado a su ubicación deseada (por ejemplo,
C:TemporalPromptEngine ).
Fácil de hacer clic en
Abra el archivo extraído (o repositorio clonado) y haga clic en RUN-FIRST-PRE-FLIGHT-CHECK.bat
- Siga las indicaciones en pantalla. El script configurará automáticamente los entornos de Python, instalará los paquetes necesarios y configurará la configuración.
La aplicación se lanzará, guiándole a través de la configuración inicial. Durante esta configuración, ya sea después de cerrar la aplicación o negar para abrir el Abierto durante la configuración, tendrá la opción de agregar un atajo para el trabajo a su escritorio. Actualmente no tiene un icono. Eso cargará el env y los guiones de manera confiable en el futuro.
O
Ejecute manualmente el script de configuración :
- Abra el símbolo del sistema y navegue al directorio de
TemporalPromptEngine extraído: cd C: T emporalPromptEngine-main
- Navegue a la carpeta
WINDOWS : - Ejecute el script de configuración:
## Guía de inicio rápido
Si agregó el acceso directo al escritorio durante la configuración
Click the Temporal Prompt Engine Shortcut on your Windows Desktop
Si no agregó acceso directo al escritorio durante la configuración
Active el entorno virtual :
cd C: T emporalPromptEngine-main
TemporalPromptEngineEnv S cripts a ctivate
Iniciar la aplicación :
python TemporalPromptEngine.py
Ingrese la clave API en la aplicación :
- Pegue su tecla API de Huggingface cuando se le solicite durante la configuración del motor de inmediato temporal.
- Solo necesitará ingresar esta vez dentro de un entorno de motor de configuración. Simplemente puede cerrar esta ventana emergente en usos posteriores.
Ingrese su concepto de escena :
Ingrese su idea creativa o descripción de la escena (hasta 400 caracteres).
Ejemplos :
"Vea el mundo a través de los ojos de un antiguo astrónomo, mapeando las estrellas con herramientas rudimentarias bajo un vasto cielo nocturno no contaminado".
- Imágenes cripto-animales :
"Imágenes de estilo documental que captura la esquiva 'criptolión', una criatura mítica que encarna patrones digitales y pieles luminiscentes".
Configure opciones de solicitud de video y audio : Adapte sus indicaciones de video y audio utilizando desplegables y campos de entrada.
Genere indicaciones de video y audio :
- Haga clic en Generar indicaciones de video .
Guardar y exportar : todos los medios y indicaciones se guardan en su directorio de salida designado.
Modo de la historia: desatar narraciones épicas
El modo de la historia crea cohesivamente un esquema de la historia y luego convierte cada ritmo dentro de esa secuencia en un video completo y optimizado, lo que permite un procesamiento por lotes sin problemas de grupos de contenido más largos. Esto no es solo arrojar palabras clave a las indicaciones. Hay varias capas de lógica de back-end centradas en la práctica cinematográfica, la teoría e historia.
Únete al viaje de los laboratorios temporales
Apoyar la misión de empujar los límites de la IA y la tecnología. Únase como inversor, desarrollador o cliente.
Servicios adicionales ofrecidos
- La tutoría , el desarrollo , el diseño , la consultoría y los talleres están disponibles para satisfacer sus necesidades de IA y tecnología.
Contacto
Para preguntas, apoyo, oportunidades de colaboración o para discutir cómo podemos trabajar juntos:
Expresiones de gratitud
Gracias a los desarrolladores y comunidades detrás de Git , Python , FFMPEG , Hunyuanvideo , Mmaudio , Ollama , AudioldM2 , Cogvideo , Comfyui y Huggingface por hacer posible este proyecto.
