MMF является модульной основой для видения и языковых мультимодальных исследований Facebook AI Research. MMF содержит справочные реализации современных моделей видения и языка и обеспечивает несколько исследовательских проектов в Facebook AI Research. Смотрите полный список проекта внутри или построен на MMF здесь.
MMF оснащен Pytorch, позволяет распределить обучение и неописцирован, масштабируемый и быстрый. Используйте MMF для начальной загрузки для вашего следующего видения и языкового мультимодального исследовательского проекта, следуя инструкциям по установке. Взгляните на список функций MMF здесь.
MMF также выступает в качестве стартовой кодовой базы для проблем, связанных с наборами данных и языками (ненавистные мемы, текстовые VQA, TextCaps и VQA -проблемы). MMF был ранее известен как Pythia. Следующее видео показывает обзор того, как наборы данных и модели работают внутри MMF. Проверка видео MMF.
Следуйте инструкциям по установке в документации.
Узнайте больше о MMF здесь.
Если вы используете MMF в своей работе или используете какие -либо модели, опубликованные в MMF, укажите:
@misc { singh2020mmf ,
author = { Singh, Amanpreet and Goswami, Vedanuj and Natarajan, Vivek and Jiang, Yu and Chen, Xinlei and Shah, Meet and
Rohrbach, Marcus and Batra, Dhruv and Parikh, Devi } ,
title = { MMF: A multimodal framework for vision and language research } ,
howpublished = { url{https://github.com/facebookresearch/mmf} } ,
year = { 2020 }
}MMF лицензирован по лицензии BSD, доступной в файле лицензии