Am 18. Februar kündigte Kunlun Wanwei die Open Source of Chinas erstes Videogenerierungsmodell für die KI-Kurzdrama-Kreation Skyreels-V1 und den ersten SOTA-Expression Action Controllable Algorithmus Skyreels-A1 an. Dieser große Schritt markiert einen wichtigen Schritt im Bereich der KI -Videogenerierung in China, das darauf abzielt, die technischen Hindernisse und Kommerzialisierungsprobleme zu lösen, die im aktuellen Modell der AI -Videogenerierung vorhanden sind, und der KI -kurzen Drama -Industrie neue Vitalität zu verleihen.
Skyreels-V1 als erstes Open-Source-Videogenerierungsmodell für die KI-Kürzung der KI-Kurzdrama-Kreation verfügt über eine technische Architektur, die mehrere Module wie Lippengenerierung, Expressionsgenerierung und Körpergenerierung integriert und eine genaue Kontrolle über die Details der Leistungen der Charaktere erreicht. Dieses Modell wird von zehn Millionen hochwertiger Hollywood-Daten ausgebildet und fein abgestimmt, was die Kontrollierbarkeit der Expressionsgenerierung und der Erzeugung von Körper erheblich verbessert und eine starke technische Unterstützung für die KI-kurze Dramaerstellung bietet.
SkyReels-V1 unterstützt eine vielfältige Kombination von 33 zarten Charakterausdrücken und mehr als 400 natürlichen Bewegungen, die die wirklichen emotionalen Ausdrücke stark wiederherstellen können. Die Videos, die es erzeugt, haben nicht nur die Licht- und Schattenästhetik und die Bildtextur auf Filmebene, sondern können auch die Erzeugung von Mikro-Expressionsaufführungen auf Filmebene von Charakteren erreichen. Es ist besonders erwähnenswert, dass Skyreels-V1 nicht nur Wensheng Video unterstützt, sondern auch Tiesheng-Video mit den größten Parametern im aktuellen Open-Source-Videogenerierungsmodell unterstützt.
Auf der technischen Implementierungsebene stützt sich SkyReels-V1 auf die von Kunlun Wanwei entwickelte leitende Datenreinigung und manuelle Kennzeichnung, um zehn Millionen hochwertiger Filme, TV-Serien und Dokumentarfilmdaten zu erstellen. Das Team entwickelte auch das "menschlich zentrierte" Videoverständnis multimodales Modell, das das Verständnis von Charakteren im Video erheblich verbesserte und eine solide technische Grundlage für die genaue Kontrolle des Modells bildete.
SkyReels-A1 ist der erste SOTA-Level-Video-Basis-modellbasierte Expression-Action-kontrollierbare Algorithmus, der die Expression auf Video-gesteuerte Movie-Ebene unterstützt und die Wiederherstellung von Mikroausdachern mit hoher Fidelität realisiert. Dieser Algorithmus kann hochrealistische Charakter-dynamische Videos erzeugen, die auf jedem menschlichen Körperanteil basieren.
Skyreels-A1 hat erhebliche Vorteile bei der technischen Implementierung und unterstützt die Erzeugung der Expressionskontrolle von Seitengesichtern, die realistischere Augenbrauen- und Augen-Mikro-Expressionserzeugung sowie größere Kopf- und natürliche Körperbewegungen erzielen können. Im Vergleich zu Runways ACT-One weist SkyReels-A1 keine Verzerrung in den erzeugten Videos auf, und die Leistungsdetails sind realistischer, was eine natürliche und perfekte Verschmelzung von Ausdrücken und Körperbewegungen erreichen kann und höhere technische Standards für die KI-kurze Dramaerstellung bietet.
Kunlun Wanwei hat sich immer an das Konzept der Open Source eingehalten und verpflichtet sich, die technologische Gleichheit zu fördern. Seit August 2023 hat das Unternehmen mehrere Modelle wie die "Tiangong" Skywork-13b-Serie, das Full-Process-F & E-Toolkit von Digital Intelligent Body AgentStudio und das "Tiangong Big Model 3.0" 400 Milliarden Parameter Moe Super-Modell eröffnet. Diese Open-Source-Skyreels-V1 und Skyreels-A1 sind die ersten Fälle in der KI-kurzen Drama-Industrie, die den Benutzern kostengünstigere, kontrollierbare AIGC-Funktionen verleihen und die kontinuierliche Konstruktion und den Wohlstand des KI-kurzen Drama-Ökosystems fördern.
Fang Han, Vorsitzender und CEO von Kunlun Wanwei, sagte, dass die Entstehung von AIGC -Fähigkeiten die Kosten für die Filmproduktion erheblich senken und gleiche Rechte in Kultur fördern werde. Kunlun Wanwei wird in Zukunft weiterhin weitere Modelle und Algorithmen für Videogenerierung von Open -Source weiterleiten, mehr Möglichkeiten für die Entwicklung der KI -kurzen Drama -Industrie bieten und die weit verbreitete Anwendung der AI -Technologie im Bereich der Erstellung von Film- und Fernseherschaffen fördern.
Open Source -Adresse:
Skyreels-V1
https://github.com/skyworkai/skyreels-v1
Skyreels-A1
https://github.com/skyworkai/skyreels-a1
Technischer Bericht: https://skyworkai.github.io/skyreels-a1.github.io/report.pdf
Skyreels offizielle Adresse: Skyreels.ai