Гарнитуры смешанной реальности накладывают виртуальное изображение на объекты реального мира, но для этого они должны иметь возможность передавать в глаз человека картинку окружающей среды без искажений, которые возникают из-за того, что камеры и глаза смотря на мир под разными углами. Для того, чтобы нейтрализовать эту разницу, используются различные вычислительные методы синтеза изображений, однако помехи все равно остаются.

Инженеры команды DSR компании Meta* предложили новое решение этой проблемы, пишет ZD Net. Они разработали архитектуру, которая собирает образцы тех же лучей, которые попали бы в глаза пользователя. Эту технологию они назвали транзитом светового поля. Дополнительная система апертур между линзами камер и датчиками обеспечивает оптимальный захват света вне зависимости от движения глаз.

Модуль апертур можно сравнить со сферическим глазом насекомого, с отверстиями, направленными во все стороны. Получая данные со всех углов, процессор обрабатывает их, упорядочивая в зависимости от глубины, и, таким образом, реконструирует картинку. Лучше всего эта оптическая конструкция работает с тонкими гарнитурами, где камеры располагаются как можно ближе к глазам.

В августе эта технология была представлена на ежегодной конференции по компьютерной графике Siggraph 2023. «Это был определенно один из самых качественных транзитных переходов [дополненной реальности], которые я когда-либо видел», — сказал Аншел Саг, главный аналитик Moors Insights & Strategy.

Из недостатков бета-версии прототипа Саг назвал узкое поле обзора, из-за которого пользователю приходится постоянно поворачивать голову влево-вправо.

* Организация признана экстремистской и запрещена на территории России.

Apple была вынуждена резко сократить прогнозы производства гарнитуры смешанной реальности Vision Pro, представленной в прошлом месяце после семи лет разработки. Первоначальные надежды на отгрузку 1 млн штук в 2024 году не оправдались из-за производственных проблем и сложности конструкции гарнитуры.