Скачать mmaction - Скачать исходный код mmaction

mmaction

Питон

1.0.0

Скачать

МММАЦИЯ

Введение

MMAction - это набор инструментов с открытым исходным кодом для понимания действий на основе Pytorch. Это часть проекта Open-MMLAB, разработанного мультимедийной лабораторией, CUHK.

Основные особенности

MMAction способен справиться со всеми задачами ниже.
- Распознавание действий из обрезанных видеороликов
- Обнаружение временных действий (также известное как локализация действий) в неказанных видео
- Пространственное временное обнаружение действий в нерешимых видео.
Поддержка различных наборов данных
Наборы данных видео появлялись в течение последних лет и значительно способствовали развитию этой области. MMAction предоставляет инструменты для работы с различными наборами данных.
Поддержка многократных фреймворков понимания действий
MMAction реализует популярные рамки для понимания действий:
- Для распознавания действий реализованы различные алгоритмы, в том числе TSN, I3D, Slow -MlessFast, R (2+1) D, CSN.
- Для обнаружения временных действий мы реализуем SSN.
- Для обнаружения пространственного временного атомного действия обеспечивается базовая линия Fast-Rcnn.
Модульный дизайн
Задачи в понимании человеческих действий имеют некоторые общие аспекты, такие как основы, а также схемы долгосрочных и краткосрочных отборов. Кроме того, задачи могут извлечь выгоду друг от друга. Например, лучшая основая для распознавания действий принесет повышение производительности для обнаружения действий. Модульный дизайн позволяет нам просматривать понимание действий в более интегрированной перспективе.

Лицензия

Проект выпускается по лицензии Apache 2.0.

Обновления

Выпуск модели OmniSource (22/08/2020)

Мы выпускаем несколько моделей нашей работы. Эти модели совместно обучаются с помощью веб-данных Kinetics-400 и Omnisourced. Эти модели имеют хорошую производительность (точность TOP1: 75,7% для 3-сегмента TSN и 80,4% для медонов на Kinetics-400 VAL) и хорошо переносится в проведении представления в другие задачи.

v0.2.0 (15/03/2020)

Мы строим диверсифицированный модельзоо для распознавания действий, который включает в себя популярные алгоритмы (TSN, I3D, Slow -Mless, R (2+1) D, CSN). Производительность выровнена или лучше, чем оригинальные бумаги.

v0.1.0 (19/06/2019)

MMAction - онлайн!

Модельный зоопарк

Результаты и эталонные модели доступны в модельном зоопарке.

Установка

Пожалуйста, обратитесь к install.md для установки.

Обновление: для установки Docker, пожалуйста, обратитесь к Docker.md для использования Docker для этого проекта.

Подготовка данных

Пожалуйста, обратитесь к DataSet.md для общего знания подготовки данных. Подробные документы для поддерживаемых наборов данных доступны в data_tools/ .

Начните

Пожалуйста, обратитесь к get get_started.md для подробных примеров и абстрактного использования.

Внося

Мы ценим все вклады для улучшения MMACTION. Пожалуйста, обратитесь к Contrubuting.md для получения руководства.

Цитирование

Если вы используете нашу кодовую базу или модели в своем исследовании, пожалуйста, укажите эту работу. Мы выпустим технический отчет позже.

 @misc{mmaction2019,
  author =       {Yue Zhao, Yuanjun Xiong, Dahua Lin},
  title =        {MMAction},
  howpublished = {url{https://github.com/open-mmlab/mmaction}},
  year =         {2019}
}