Устройство, по сути, представляет собой усовершенствованные наушники с шумоподавлением. Особенностью этой модели стали шесть дополнительных микрофонов, интегрированных в корпус. Встроенный компьютер обрабатывает звуковые данные с помощью нейронной сети, которая способна определять расстояние до различных источников звука. Благодаря этому гаджет отфильтровывает отдаленные шумы и усиливает звуки, находящиеся ближе к пользователю.
Результатом становится своеобразный «звуковой пузырь». Диаметр этого пузыря можно регулировать в пределах 1-2 м. Внутри него звуки воспринимаются четко и ясно, в то время как внешние шумы подавляются в среднем на 49 децибел. Если кто-то другой войдет в этот «купол», то сможет присоединиться к разговору.
Искусственный интеллект определяет расстояние до каждого источника звука в помещении и обрабатывает эту информацию в режиме реального времени непосредственно на звуковом устройстве. При этом задержка обработки составляет всего 8 миллисекунд.
Изначально нейросеть обучали на данных, собранных в 22 типах внутренних помещений, таких как офисы и жилые комнаты. Для этого наушники надевали на голову манекена и поворачивали туда-сюда, одновременно воспроизводя звуки с разных расстояний. Алгоритм научился определять расстояние до источника звука, анализируя различия в фазах звуковых волн разных частот. Это позволило блокировать нежелательные шумы.
Команда разрабатывает технологию уже некоторое время. Прошлогодняя итерация использовала рой роботов, которые самостоятельно передвигались по комнате, делая замеры для создания отдельных аудиопотоков от разных источников. Это позволяло пользователю отключать звук в определенных зонах при необходимости. Несколько месяцев назад исследователи продемонстрировали версию, способную выделить голос одного человека, просто взглянув на него.
«Звуковой пузырь» может стать самым практичным воплощением технологии, позволяя вести четкие беседы в шумных местах, например, в баре, не отвлекаясь на посторонние звуки. Решение также можно интегрировать в компактные устройства, например, слуховые аппараты. Команда уже работает над этим направлением и создала стартап для коммерциализации своего изобретения.