CEO стартапа Джастин Фуисз объясняет, что их AR-технологии позволяют с помощью обычной камеры определить человека, захватить его движения и в режиме реального времени работать с этим объектом. Можно наложить на человека фон, убрать его из видео и сделать его полноценной частью дополненной реальности. Некоторые особенности компания показала в демонстрационном ролике.

В компании рассказывают, что для распознавания человека и его движений разработали сложный алгоритм компьютерного зрения на основе машинного обучения. Журналист Techcrunch, наблюдавший за технологией в живую, рассказывает, что она работает корректно, так же, как в демонстрационном ролике. Если навести камеру на человека, то его контур подсвечивается разноцветной линией — значит объект захвачен. Фиксируются основные точки тела: глаза, рот, нос, колени, локти. После этого в мире дополненной реальности с человеком можно делать все, что угодно.

Джастин Фуисз говорит, что технология универсальная и может быть применена в самых разных областях: игры, мода, спорт, продажи одежды, развлечения. Но судя по реализации, можно предположить, что компания работает для одного очень конкретного клиента — Instagram. В виде отдельного приложения такая технология вряд ли вызовет долгий интерес, а как очередная фишка для Instagram может понравиться многим. Компания рассказывает, что уже нашла партнеров, которые инвестировали в развитие этой технологии $7,5 млн. Предприниматель говорит, что приложение доступно для тестов, его можно скачать для IOS.

Другим интересным вариантом развития мог бы стать переход на AR-гарнитуры. Например, в скором времени должны начаться поставки долгожданной гарнитуры Magic Leap. А Leap Motion анонсировала Project North Star, гарнитуру дополненной реальности нового поколения, с рекомендованной стоимостью $100. В таком формате технология будет смотреться органичнее: можно будет менять менять людей вокруг на что-то более приятное. Или, например, полностью скрывать их из вида.