Hitech logo

Идеи

Алгоритм EmbodyMe одевает и причесывает собеседников в Zoom

TODO:
Степан Икаев10 мая 2022 г., 16:31

Японский стартап EmbodyMe разработал дипфейк-приложение для деловых конференций и специалистов, которые перешли на удаленную работу. Используя алгоритмы машинного обучения, сервис виртуально одевает на собеседников костюмы и укладывает им волосы. Технология работает в режиме реального времени и полностью избавляет своих пользователей от необходимости готовиться к звонкам — поговорить через Zoom или Skype с EmbodyMe теперь можно в пижаме и с растрепанными волосами.

Самые интересные технологические и научные новости выходят в нашем телеграм-канале Хайтек+. Подпишитесь, чтобы быть в курсе.

Как сообщает Asia Nikkei, платформа EmbodyMe была разработана в ответ на пандемию и массовый переход на удаленную работу. Компания, основанная в Токио в 2020 году, утверждает, что помогает пользователям выглядеть достойно, даже когда они только что встали с постели. Для этого клиенты EmbodyMe должны просто загрузить приложение стартапа на свой компьютер, добавить в профиль свои «профессиональные фотографии» — фотокарточки, на которых человек был запечатлен в деловом костюме — и открыть алгоритмам доступ к встроенной или подключенной видеокамере.

ИИ от EmbodyMe обрабатывает предложенные изображения и генерирует более совершенную 3D-модель, достраивая в кадре недостающие объекты. Затем, когда пользователь запускает Zoom, Skype или Teams, платформа синхронизирует трансляцию от камеры с заранее подготовленными фотографиями — на собеседниках появляется одежда, их волосы укладываются, а кожа становится более гладкой.

Сервис отслеживает более 50 тыс. различных точек на лицах пользователей, точно улавливая эмоции и мельчайшие изменения в мимике. В этом наборе алгоритмов заключается главное преимущество системы — на обработку изображений, «переодевание» пользователей и передачу лицевых анимаций у EmbodyMe уходит всего 0,01 секунды. Это означает, что для человека, разговаривающего с клиентом стартапа, видео транслируется с той же задержкой, что при обычном разговоре в Zoom.

«Сила EmbodyMe заключается в его уникальной способности обрабатывать и генерировать видео полностью в режиме реального времени», — объяснил глава стартапа Иссай Йошида.

Стартап запустил бета-версию своей технологии в сентябре 2020 года, а на днях организовал релиз полноценного приложения. Базовый фильтр EmbodyMe бесплатен, но пользователи могут получить больше функций — например, для записи отложенных видеосообщений — за $8 в месяц. В перспективе разработчик хочет перейти от частных пользователей к корпоративным клиентам — сервис EmbodyMe планирует одевать и причесывать в процессе видеоконференций целые компании. Условия корпоративной подписки пока не раскрываются.