MMF هو إطار معياري للبحوث المتعددة الوسائط اللغوية من Facebook AI. يحتوي MMF على تطبيقات مرجعية لنماذج الرؤية والنماذج اللغوية الحديثة ، وقد قامت بتشغيل مشاريع بحثية متعددة في Facebook AI Research. انظر قائمة كاملة من المشروع داخل أو بنيت على MMF هنا.
يتم تشغيل MMF بواسطة Pytorch ، ويسمح بالتدريب الموزعة وهو غير مبين وقابل للتطوير وسريع. استخدم MMF لتسهيل مشروع الرؤية واللغة التالية للأبحاث المتعددة من خلال اتباع تعليمات التثبيت. ألقِ نظرة على قائمة ميزات MMF هنا.
يعمل MMF أيضًا كـ BATTER CodeBase للتحديات حول مجموعات بيانات الرؤية واللغة (الميمات البغيضة ، TextVQA ، TextCaps و VQA التحديات). كان MMF يعرف سابقا باسم بيثيا. يعرض الفيديو التالي نظرة عامة على كيفية عمل مجموعات البيانات والموديلات داخل MMF. الخروج نظرة عامة على الفيديو MMF.
اتبع تعليمات التثبيت في الوثائق.
تعرف على المزيد حول MMF هنا.
إذا كنت تستخدم MMF في عملك أو استخدمت أي نماذج منشورة في MMF ، فيرجى الاستشهاد:
@misc { singh2020mmf ,
author = { Singh, Amanpreet and Goswami, Vedanuj and Natarajan, Vivek and Jiang, Yu and Chen, Xinlei and Shah, Meet and
Rohrbach, Marcus and Batra, Dhruv and Parikh, Devi } ,
title = { MMF: A multimodal framework for vision and language research } ,
howpublished = { url{https://github.com/facebookresearch/mmf} } ,
year = { 2020 }
}MMF مرخص بموجب ترخيص BSD المتاح في ملف الترخيص