kaolin wisp

Каолин WISP: библиотека и двигатель Pytorch для исследования нейронных полей

NVIDIA KAOLIN WISP-это библиотека Pytorch, основанная на Nvidia Kaolin Core для работы с нейронными полями (включая NERFS, NGLOD, Instant-NGP и VQAD).

Nvidia Kaolin Wisp стремится предоставить набор общих функций полезности для проведения исследований на нейронных областях. Это включает в себя наборы данных, ввод/вывод изображения, обработку сетки и функции утилиты Ray. WISP также поставляется с такими строительными блоками, как дифференцируемые визуализации и дифференцируемые структуры данных (например, Octrees, Hash Grids, Triplanar), которые полезны для создания сложных нейронных полей. Он также включает в себя отладку инструментов визуализации, интерактивное рендеринг и обучение, ведение журнала и занятия тренерами.

Проверьте наш Docsite для получения дополнительной информации!

Для обзора нейронных полей мы рекомендуем проверить отчет EG Star: Нейронные поля для визуальных вычислений и за его пределами.

Последние обновления

Wisp 1.0.3 <- main

• 17/04/23 Система конфигурации была заменена! Проверьте страницу конфигурации для инструкций по использованию и обратной совместимости ( нарушение изменения ). Обратите внимание, что библиотека Wisp Core остается совместимой, сеть и тренеры должны быть обновлены.

WISP 1.0.2 <- stable

• 15/04/23 Поддержка ноутбука Jupyter была добавлена - полезно для машин без дисплея.
• 01/02/23 attrdict зависимость, добавленная как часть новой структуры наборов данных. Если вы потяните последнее, обязательно pip install attrdict .
• 17/01/23 pycuda заменил cuda-python . WISP можно установить с PIP сейчас (если вы тянете, запустите PIP установить -Р требования_ап.txt )
• 05/01/23 В настоящее время представлены в качестве автономных приложений для облегчения поддержки новых трубопроводов ( нарушение изменения )

Установка

Смотрите инструкции по установке здесь.

Внешние взносы

Мы приветствуем и поощряем внешний вклад в кодовую базу! Для получения дополнительной информации прочитайте страницу FAQ и лицензии.

Лицензия и цитата

Эта кодовая база лицензирована по лицензии NVIDIA исходного кода. Коммерческие лицензии также доступны бесплатно. Пожалуйста, подайте заявку, используя эту ссылку (используйте «Другой» и укажите Kaolin WISP): https://www.nvidia.com/en-us/research/inquiries/

Если вы найдете библиотеку Nvidia Kaolin Wisp полезной для вашего исследования, пожалуйста, укажите:

 @misc{KaolinWispLibrary,
      author = {Towaki Takikawa and Or Perel and Clement Fuji Tsang and Charles Loop and Joey Litalien and Jonathan Tremblay and Sanja Fidler and Maria Shugrina},
      title = {Kaolin Wisp: A PyTorch Library and Engine for Neural Fields Research},
      year = {2022},
      howpublished={url{https://github.com/NVIDIAGameWorks/kaolin-wisp}}
}

Спасибо

Мы благодарим Джеймса Лукаса, Джонатана Тремблея, Валитов Блюкиса, Аниты Ху и Нишкрит Десаи за то, что он дал нам ранние отзывы и проверяя код на различных этапах на протяжении всей разработки. Мы благодарим Рогелио Олгина и Джонатана Тремблея за справочные данные WISP.

Особая благодарность за членов сообщества:

• Лайтфилд ботаник
• Сумик Ракшит

Что такое "Wisp"?

Наша библиотека названа в честь атмосферного призрачного света, Will-o'-the-wisp, которые представляют собой объемные призраки, которые труднее смоделировать с общими стандартными геометрическими представлениями, такими как сетки. Мы предоставляем многовидный набор данных WISP в качестве эталонного набора данных для объемного объекта. Мы также предоставляем сценарии Blender и рендеринг, если вы хотите генерировать конкретные данные с этой сценой, пожалуйста, см.