Стандартные AR-гарнитуры выводят картинку на линзы очков или на небольшой дисплей, установленный между стеклом и глазами пользователя. Оба решения позволяют просматривать контент, но уступают современным смартфонам и мониторам по качеству — владелец AR-устройства видит пиксели, а близкое расположение экрана негативно сказывается на здоровье глаз. Поэтому инженеры Apple выбрали альтернативный подход — ретинальный проектор, который транслирует каждый пиксель на глаза и составляет детализированное изображение. Согласно заявке, система создаст более естественный пользовательский опыт в процессе эксплуатации.

Система ретинального проектора сканирует изображения, пиксель за пикселем, учитывая глубину картинки и форму человеческого глаза. Таким образом, динамически фиксирующиеся компоненты и новая технология сканирования уменьшает, или полностью устраняет конфликт конвергенции-аккомодации в системах VR. Проще говоря, Apple планирует избавиться от главной проблемы современных VR-очков — эффекта укачивания и адаптации к изображениям на небольшом расстоянии от человека.

На некоторых изображениях из патента также изображено эллипсоидальное зеркало. Судя по всему, проектор будет отправлять изображение на изогнутую панель, которая сможет рассеять пиксели по всей поверхности сетчатки. При этом AR-контент, проецируемый системой, также может накладываться и объединяться с окружающей сценой, на которую смотрит пользователь.

Apple не уточняет в какой системе будет использована новая технология — AR или VR. В патенте указаны обе системы, хотя виртуальной реальности уделено значительно больше внимания. Важно отметить, что в существующих продуктах Apple чаще фокусируется на AR — последние iPad получили LiDAR-сенсоры для обработки сцен с разной глубиной, а значительная часть прошлогодней презентации iPhone 11 была посвящена именно дополненной реальности.

В то же время Apple — не первая компания, которая решила транслировать контент прямо на сетчатку глаза. В феврале 2018 года Intel показала прототип умных очков Vaunt с аналогичным набором возможностей. Vaunt использовали маломощный лазер для направления проекции на стекло с возможностью отражения картинки на сетчатку глаза. Спустя два месяца, в конце апреля 2018 года, Intel отказалась от идеи и закрыла подразделение, ответственное за разработку умных очков.