Суть системы в том, что камера, установленная на очках, передаёт изображение окружающего пространства на миниатюрный компьютер. Он с помощью алгоритмов машинного обучения распознаёт препятствия и людей. Затем устройство каждые 250 миллисекунд сообщает пользователю аудиосигналом, куда именно ему двигаться. Сигнал может подаваться в левое или правое ухо.
Дополнительно учёные разработали специальные гибкие накладки из искусственной кожи, которые крепятся на запястья и пальцы. Они имеют отдельную встроенную камеру и начинают вибрировать, если человек приближается к предмету на расстояние от 40 до 5 сантиметров. Также браслеты вибрируют, когда пользователь тянется за объектом и должен его схватить.
Испытания устройства прошли успешно. 20 участников с нарушениями зрения протестировали его возможности. Оказалось, что использование новой технологии увеличивает эффективность перемещения на 25% по сравнению с обычной тростью. Добровольцы проходили лабиринт длиной 25 метров и смогли быстрее и безопаснее преодолеть маршрут.
Ещё один эксперимент проводили в условиях городской среды и в помещениях, заполненных мебелью. В нём участвовали 8 добровольцев, которые также подтвердили надёжность новой системы в реальных условиях.
Одно из преимуществ такой технологии перед традиционными тростями — дальность обзора. Трость определяет препятствия максимум на 1 метр впереди человека. Пользователь не получает никакой дополнительной информации об объекте, кроме его наличия. Зато камера способна заранее распознавать людей, двери, стены или мебель. Это значительно облегчает навигацию в больших городах и общественных местах.
Авторы разработки подчёркивают, что это пока экспериментальный образец, который требует значительных улучшений. Сейчас устройство громоздкое, но исследователи планируют уменьшить его размеры и вес, например, интегрировать камеру в контактные линзы. Такой вариант станет практически незаметным и удобным в повседневной жизни.
Эксперты отмечают уникальность подхода: устройство сочетает одновременно звуковые и тактильные сигналы. Однако для массового внедрения необходимо провести испытания с большим количеством людей разных возрастов и плотно взаимодействовать с медицинскими центрами и сообществами незрячих людей.