Технология использует модель ИИ, называемую Neural Radiance Field (NeRF), которая анализирует 2D-фотографии с разных ракурсов и воссоздает из них полноценные трёхмерные сцены. Это достигается благодаря использованию обратного рендеринга, который имитирует поведение лучей света в реальности, и способности ИИ к распознаванию образов.
Важным преимуществом Instant NeRF является её доступность для широкого круга пользователей, так как для работы не требуется серверное оборудование. Вместо этого достаточно наличия ПК с подходящей видеокартой NVIDIA RTX.
NVIDIA также выпустила четыре предварительно обученных набора данных в рамках инструмента Instant-NGP, представленного на конференции по компьютерной графике SIGGRAPH 2022. Эти данные позволяют пользователям создавать собственные NeRF-проекты.
Компания предлагает различные ресурсы для помощи пользователям в освоении этой технологии, включая детальные руководства и видеоинструкции, доступные через графический интерфейс Instant NeRF. Эти материалы научат, как оптимизировать параметры сцены и создавать анимации.
Также, благодаря последним обновлениям, пользователи могут не только создавать 3D-сцены, но и виртуально перемещаться по ним с помощью VR-технологий, что открывает новые возможности для различных применений, от виртуальных туров до демонстрации товаров в онлайн-магазинах.
Для разработчиков и технически заинтересованных пользователей доступен исходный код, который можно скомпилировать самостоятельно. Обычные пользователи могут скачать установщик Instant-NGP для Windows, чтобы начать работу с NeRF.