أطلقت شركة Meta، بالشراكة مع جامعة الملك عبد الله للعلوم والتقنية (KAUST) في المملكة العربية السعودية، خطًا جديدًا من نماذج نشر الفيديو يسمى MarDini. يمكن لهذا النموذج إنشاء مقاطع فيديو عالية الجودة بسهولة وكفاءة وتنفيذ وظائف متعددة مثل ملء إطار الفيديو وتحويل الصور إلى فيديو وتوسيع الفيديو، مما يبسط عملية إنشاء الفيديو إلى حد كبير. سيشرح محرر Downcodes بالتفصيل خصائص ومزايا نموذج MarDini، بالإضافة إلى مساهمته الرائدة في مجال معالجة الفيديو.
في الآونة الأخيرة، عقدت شركة Meta شراكة مع جامعة الملك عبد الله للعلوم والتقنية (KAUST) في المملكة العربية السعودية لإطلاق خط جديد من نماذج نشر الفيديو - MarDini. يجعل هذا النموذج إنشاء مقاطع فيديو عالية الجودة أسهل وأكثر مرونة، وهو قادر على إكمال المهام مثل ملء الإطارات المفقودة في الفيديو، وتحويل الصور الفردية إلى مشاهد ديناميكية، وحتى تمديد المقاطع القصيرة عن طريق إضافة جزء طبيعي مستمر.
تتمتع MarDini أيضًا بالقدرة على توسيع الفيديو عن طريق تكييف الفيديو الموجود بأي طول. نضيف 12 إطارًا جديدًا إلى كل تسلسل عن طريق إنشاء امتداد مدته ثانيتان من فيديو مرجعي مكون من 5 إطارات.
ينفذ MarDini استيفاء الفيديو عن طريق إنشاء إطارات وسيطة باستخدام الإطارات الأولى والأخيرة كإشارات تكييف. عندما تكون هذه الإطارات الحدودية متماثلة، يمكن لـ MarDini إنشاء مقاطع فيديو متكررة بشكل سلس.
كيف يعمل مارديني مثير للاهتمام للغاية. يستخدم تقنية توليد الفيديو المتقدمة والفعالة ويتكون بشكل أساسي من جزأين: نموذج التخطيط ونموذج التوليد. أولاً، يستخدم نموذج التخطيط طريقة الانحدار الذاتي المقنع (MAR) لتفسير إطارات الإدخال منخفضة الدقة وإنشاء إشارات توجيهية للإطارات التي يلزم إنشاؤها. يستخدم النموذج التوليدي خفيف الوزن بعد ذلك عملية نشر لإنشاء إطارات تفصيلية عالية الدقة، مما يضمن أن يكون الفيديو النهائي سلسًا وممتعًا بصريًا.
على عكس العديد من نماذج الفيديو التي تتطلب نماذج صور معقدة ومدربة مسبقًا، يدعي MarDini أنه تم تدريبه من الصفر باستخدام بيانات فيديو غير مسماة. وذلك لأنه يعتمد استراتيجية تدريب تقدمية، والتي تمكن النموذج من التعامل بشكل أفضل مع تكوينات الإطارات المختلفة عن طريق ضبط طريقة إخفاء الإطارات بمرونة أثناء عملية التدريب.
السمة المميزة لـ MarDini هي مرونتها وأدائها. إنها ليست قوية فحسب، بل إنها فعالة أيضًا ومناسبة للمهام واسعة النطاق. يمكن لهذا النموذج التعامل مع مهام مثل استيفاء الفيديو، وإنشاء صورة إلى فيديو، وتوسيع الفيديو، سواء لتسهيل مقاطع الفيديو الموجودة أو إنشاء تسلسلات كاملة من البداية.
فيما يتعلق بالأداء، يضع MarDini معايير جديدة، وينتج فيديو عالي الجودة في خطوات أقل، مما يجعله فعالاً من حيث التكلفة والوقت مقارنة بالبدائل الأكثر تعقيدًا. تنص ورقة البحث الرسمية على أن "دراستنا تظهر أن إستراتيجية النمذجة لدينا تعمل بشكل تنافسي على مجموعة متنوعة من معايير الاستيفاء والرسوم المتحركة مع تقليل المتطلبات الحسابية بمقاييس معلمات قابلة للمقارنة."
مدخل المشروع: https://mardini-vidgen.github.io/
بشكل عام، يوفر نموذج MarDini إمكانيات جديدة في مجال إنشاء الفيديو بفضل أدائه الفعال وسيناريوهات التطبيق المرنة. إن تقنيتها المبتكرة وأدائها المتفوق تجعلها من المتوقع أن تصبح التكنولوجيا الرائدة في مجال توليد ومعالجة الفيديو في المستقبل. نتطلع إلى تقديم مارديني المزيد من المفاجآت في المستقبل!