В Стэнфордском университете разрабатывают камеру будущего: устройство, которое будет быстро распознавать объекты на изображениях. Сейчас такими системами оснащают БПЛА и беспилотные автомобили, но американские инженеры хотят сделать более компактный и энергоэффективный аналог.
Доцент Гордон Вецштейн и выпускница Стэнфорда Джули Чан сконструировали так называемый гибридный компьютер и опубликовали статью о нем в Nature Scientific Reports. Их устройство анализирует изображения в два этапа. Сначала все поступающие данные фильтрует оптический компьютер, которому не требуется проводить для этого сложные математические расчеты. Это позволяет сэкономить энергию. Затем изображение анализируют нейросети.
«Миллионы математических операций можно пропустить, и все это происходит со скоростью света», — поясняет Вецштейн.
Пока устройство получилось не слишком компактным, но зато во время тестов оно успешно справилось с распознаванием самолетов, автомобилей, кошек и собак. Ученые надеются, что их устройство в будущем будет настолько миниатюрным, что поместится в портативную камеру.
«Будущие версии нашей системы будут полезны в ситуациях с быстрым принятием решений — например, для автономных транспортных средств», — указывает стэнфордский доцент.
Коллеги Вейцштейна в Массачусетском технологическом институте тоже работают над разработкой камеры будущего — без фокусного расстояния.