Pada 18 Februari, Kunlun Wanwei mengumumkan open source dari model generasi video pertama Tiongkok untuk drama pendek AI kreasi Skyreels-V1 dan algoritma algoritma yang dapat dikendalikan dari algoritma yang dapat dikendalikan oleh skyreels-A1. Langkah utama ini menandai langkah penting di bidang generasi video AI China, yang bertujuan untuk menyelesaikan hambatan teknis dan masalah komersialisasi yang ada dalam model generasi video AI saat ini dan menyuntikkan vitalitas baru ke dalam industri drama pendek AI.
Sebagai model generasi video open source pertama China untuk penciptaan drama pendek AI, Skyreels-V1 memiliki arsitektur teknis yang mengintegrasikan banyak modul seperti generasi bibir, generasi ekspresi dan generasi tubuh, mencapai kontrol yang akurat dari rincian kinerja karakter. Model ini dilatih dan disempurnakan oleh puluhan juta data Hollywood berkualitas tinggi, yang secara signifikan meningkatkan pengontrolan generasi ekspresi dan generasi tubuh, dan memberikan dukungan teknis yang kuat untuk penciptaan drama pendek AI.
Skyreels-V1 mendukung kombinasi beragam dari 33 ekspresi karakter yang halus dan 400+ gerakan alami, yang dapat sangat memulihkan ekspresi emosional kehidupan nyata. Video-video yang dihasilkannya tidak hanya memiliki estetika cahaya dan bayangan tingkat film dan tekstur gambar, tetapi juga dapat mencapai generasi penampilan karakter mikro-ekspresi tingkat film. Perlu disebutkan bahwa Skyreels-V1 tidak hanya mendukung video Wensheng, tetapi juga mendukung video Tiesheng.
Pada tingkat implementasi teknis, Skyreels-V1 bergantung pada pembersihan data berkualitas tinggi dan pipa pelabelan manual yang dikembangkan oleh Kunlun Wanwei untuk membangun puluhan juta film berkualitas tinggi, serial TV, dan data dokumenter. Tim juga mengembangkan model multimodal pemahaman video "manusia-sentris", yang secara signifikan meningkatkan pemahaman karakter dalam video dan memberikan fondasi teknis yang solid untuk kontrol yang tepat dari model.
Skyreels-A1 adalah algoritma yang dapat dikendalikan dari algoritma yang dapat dikendalikan oleh Ekspresi Tindakan Model Tindakan SOTA, yang mendukung penangkapan ekspresi level film yang digerakkan oleh video dan mewujudkan restorasi ekspresi mikro kesetiaan tinggi. Algoritma ini dapat menghasilkan video dinamis karakter yang sangat realistis berdasarkan proporsi tubuh manusia apa pun.
Skyreels-A1 memiliki keunggulan yang signifikan dalam implementasi teknis, mendukung generasi kontrol ekspresi wajah samping, yang dapat mencapai alis yang lebih realistis dan generasi ekspresi mikro mata dan gerakan kepala dan tubuh alami yang lebih besar. Dibandingkan dengan ACT-One Runway, Skyreels-A1 tidak memiliki distorsi dalam video yang dihasilkan, dan detail kinerjanya lebih realistis, yang dapat mencapai perpaduan ekspresi dan gerakan tubuh yang alami dan sempurna, memberikan standar teknis yang lebih tinggi untuk penciptaan drama pendek AI.
Kunlun Wanwei selalu mematuhi konsep open source dan berkomitmen untuk mempromosikan kesetaraan teknologi. Sejak Agustus 2023, perusahaan ini telah secara berturut-turut membuka beberapa model seperti seri "Tiangong" Skywork-13b, toolkit R&D-proses lengkap dari Digital Intelligent Body Agentstudio, dan "400 miliar parameter Moe Super Model" Tiangong Big Model 3.0 "400 miliar. Sumber terbuka Skyreels-V1 dan Skyreels-A1 ini adalah kasus pertama dalam industri drama pendek AI, yang bertujuan untuk membawa kemampuan AIGC berbiaya rendah dan lebih terkontrol kepada pengguna dan mempromosikan konstruksi dan kemakmuran yang berkelanjutan dari ekosistem drama pendek AI.
Fang Han, ketua dan CEO Kunlun Wanwei, mengatakan bahwa kemunculan kemampuan AIGC akan secara signifikan mengurangi biaya produksi film dan mempromosikan hak yang sama dalam budaya. Di masa depan, Kunlun Wanwei akan terus open source lebih banyak model dan algoritma generasi video, memberikan lebih banyak kemungkinan untuk pengembangan industri drama pendek AI, dan mempromosikan aplikasi teknologi AI yang meluas di bidang penciptaan film dan televisi.
Alamat Sumber Terbuka:
Skyreels-V1
https://github.com/skyworkai/skyreels-v1
Skyreels-A1
https://github.com/skyworkai/skyreels-a1
Laporan Teknis: https://skyworkai.github.io/skyreels-a1.github.io/report.pdf
SKYREELS ALAMAT RESMI: Skyreels.ai