Situs web resmi www.binance.com/zh-cn :Masukkan situs web resmi ☜☜
Aplikasi: ☞☞ Unduh Aplikasi Resmi☜☜
Shanghai Jieyue Xingchen Intelligent Technology Co., Ltd baru-baru ini mengumumkan sumber terbuka dari pengembangan terbaru dari model video grafis-Step-Video-Ti2V. Model ini didasarkan pada pelatihan langkah-video-T2V dengan parameter 30B. Ini dapat menghasilkan 102 frame, 5 detik, dan video resolusi 540p. Ini memiliki dua fitur inti: amplitudo gerak yang dapat dikendalikan dan gerakan lensa yang dapat dikendalikan, terutama dalam hal efek animasi. Dibandingkan dengan model video open source yang ada, Video-Ti2V langkah tidak hanya memberikan batas atas yang lebih tinggi dalam skala parameter, tetapi amplitudo gerak yang dapat dikendalikan juga dapat menyeimbangkan dinamika dan stabilitas hasil pembuatan video, memberikan para pembuat pilihan yang lebih fleksibel.
Selama pengembangan Video-Ti2V langkah, tim melakukan dua optimasi utama. Pertama, kondisi gambar diperkenalkan untuk meningkatkan konsistensi antara video yang dihasilkan dan gambar asli. Berbeda dengan metode lintas-perhatian tradisional, model mengadopsi cara yang lebih langsung, secara langsung menyambungkan dimensi saluran dengan secara langsung menyambungkan representasi vektor yang sesuai dengan bingkai pertama DIT, sehingga untuk memastikan bahwa video yang dihasilkan sangat konsisten dengan gambar input. Kedua, modul Adaln memperkenalkan informasi penilaian dinamis video, sehingga pengguna dapat menentukan tingkat gerakan yang berbeda saat menghasilkan video, secara akurat mengontrol amplitudo dinamis video, sehingga menyeimbangkan dinamika, stabilitas, dan konsistensi. Selain itu, tim juga membuat penanda khusus dan tepat dari gerakan subjek dan gerakan lensa, lebih lanjut meningkatkan kinerja model dalam dinamika subjek dan efek pergerakan cermin.
Fitur inti dari step-video-Ti2V termasuk amplitudo gerak yang dapat dikendalikan, beberapa kontrol cermin, efek animasi yang sangat baik dan dukungan untuk generasi multi-ukuran. Pengguna dapat dengan bebas beralih gambar dinamis dan stabil sesuai dengan kebutuhan kreatif mereka, dan menghasilkan video dari dorongan dasar, gemetar, mengangkat dan menurunkan efek cermin tingkat film yang kompleks. Model ini sangat luar biasa dalam tugas animasi dan sangat cocok untuk skenario aplikasi seperti pembuatan animasi dan produksi video pendek. Pada saat yang sama, ini mendukung berbagai ukuran video yang dihasilkan gambar, apakah itu layar horizontal, vertikal atau persegi, dapat memenuhi kebutuhan platform yang berbeda.
Alamat Pengalaman:
https://yuewen.cn/videos
GitHub:
https://github.com/stepfun-ai/step-video-ti2v
GitHub-comfyui:
https://github.com/stepfun-ai/comfyui-stepvideo