2 월 18 일, Kunlun Wanwei는 AI 짧은 드라마 제작 Skyreels-V1에 대한 중국 최초의 비디오 세대 모델의 오픈 소스와 첫 번째 SOTA 수준의 표현 조치 조절 가능한 알고리즘 Skyreels-A1을 발표했습니다. 이 주요 움직임은 현재 AI 비디오 생성 모델에 존재하는 기술적 장벽과 상용화 문제를 해결하고 AI 짧은 드라마 산업에 새로운 활력을 주입하는 것을 목표로하는 중국의 AI 비디오 세대 분야에서 중요한 단계입니다.
Skyreels-V1은 AI 짧은 드라마 제작을위한 중국 최초의 오픈 소스 비디오 생성 모델로서 립 생성, 표현 생성 및 바디 생성과 같은 여러 모듈을 통합하여 캐릭터의 성능 세부 사항을 정확하게 제어하는 기술 아키텍처를 보유하고 있습니다. 이 모델은 수천만 개의 고품질 할리우드 데이터에 의해 교육 및 미세 조정되어 표현 생성 및 신체 생성의 제어 가능성을 크게 향상시키고 AI 짧은 드라마 생성에 대한 강력한 기술 지원을 제공합니다.
Skyreels-V1은 33 개의 섬세한 캐릭터 표현과 400 개 이상의 자연 운동의 다양한 조합을 지원하여 실제 정서적 표현을 크게 회복시킬 수 있습니다. 그것이 생성하는 비디오는 영화 수준의 빛과 그림자 미학과 그림 질감을 가질뿐만 아니라 영화 수준의 마이크로 표현식 공연을 생성 할 수 있습니다. Skyreels-V1은 Wensheng 비디오를 지원할뿐만 아니라 Tiesheng 비디오를 지원한다는 것을 언급 할 가치가 있습니다. 현재 오픈 소스 비디오 생성 모델에서 가장 큰 매개 변수를 가진 Tiesheng 비디오 모델입니다.
기술 구현 수준에서 Skyreels-V1은 Kunlun Wanwei가 개발 한 고품질 데이터 청소 및 수동 라벨링 파이프 라인에 의존하여 수천만 개의 고품질 영화, TV 시리즈 및 다큐멘터리 데이터를 구축합니다. 이 팀은 또한 "인간 중심"비디오 이해 다중 모드 모델을 개발하여 비디오의 캐릭터 이해를 크게 향상 시켰으며 모델의 정확한 제어를위한 견고한 기술 기반을 제공했습니다.
Skyreels-A1은 비디오 중심의 영화 수준 표현식 캡처를 지원하고 고 충실도 마이크로 표현 복원을 실현하는 최초의 SOTA 레벨 비디오 기반 모델 기반 표현식 조절 알고리즘입니다. 이 알고리즘은 인체 비율에 따라 매우 현실적인 캐릭터 동적 비디오를 생성 할 수 있습니다. 현실은 캐릭터 표현 변화, 감정, 피부 질감 및 신체 움직임과 같은 다차원 세부 사항의 깊은 회복에서 비롯되어 AI 짧은 드라마 생성을위한 새로운 가능성을 제공합니다.
Skyreels-A1은 측면면의 표현 제어를 지원하는 기술 구현에서 중요한 이점을 가지고 있으며, 이는보다 현실적인 눈썹과 눈 미세 표현 생성과 더 큰 머리와 자연 신체 움직임을 달성 할 수 있습니다. Runway의 Act-One과 비교할 때 Skyreels-A1은 생성 된 비디오에서 왜곡이 없으며, 성능 세부 사항은 더욱 현실적이며, 이는 표현과 신체 움직임의 자연스럽고 완벽한 융합을 달성하여 AI 짧은 드라마 생성에 더 높은 기술 표준을 제공 할 수 있습니다.
Kunlun Wanwei는 항상 오픈 소스 개념을 준수했으며 기술 평등을 촉진하기 위해 노력하고 있습니다. 2023 년 8 월 부터이 회사는 "Tiangong"Skywork-13B 시리즈, Digital Intelligent Body Agentstudio의 풀 프로세스 R & D 툴킷 및 "Tiangong Big Model 3.0"400 억 매개 변수 MOE Super Model과 같은 여러 모델을 연속적으로 개설했습니다. 이 오픈 소스 Skyreels-V1 및 Skyreels-A1은 AI 짧은 드라마 산업의 첫 번째 사례로, 사용자에게 저렴하고 제어 가능한 AIGC 기능을 제공하고 AI 짧은 드라마 생태계의 지속적인 구성과 번영을 촉진하는 것을 목표로합니다.
Kunlun Wanwei의 회장 겸 CEO 인 Fang Han은 AIGC 기능의 출현은 영화 제작 비용을 크게 줄이고 문화의 동등한 권리를 촉진 할 것이라고 말했다. 앞으로 Kunlun Wanwei는 더 많은 비디오 생성 모델 및 알고리즘을 계속 오픈 할 예정이며 AI 짧은 드라마 산업의 개발을위한 더 많은 가능성을 제공하며 영화 및 TV 제작 분야에서 AI 기술의 광범위한 응용 프로그램을 홍보 할 것입니다.
오픈 소스 주소 :
Skyreels-V1
https://github.com/skyworkai/skyreels-v1
SkyReles-A1
https://github.com/skyworkai/skyreels-a1
기술 보고서 : https://skyworkai.github.io/skyreels-a1.github.io/report.pdf
Skyreels 공식 주소 : Skyreels.ai