Hitech logo

Идеи

Технология захвата движений YunBo работает со смартфоном и без маркеров

TODO:
Степан Икаев27 декабря 2020 г., 12:48

Китайский стартап YunBo Technology разработал полнофункциональную систему для создания компьютерных моделей без маркеров и дополнительного оборудования. Технология переносит изображения человека в виртуальный мир с помощью камеры смартфона и алгоритмов на базе машинного обучения. Стартап планирует использовать систему в производстве виртуальных идолов — популярных артистов для стран Азии, которые существуют только в сети и виртуальной среде.

00
Самые интересные технологические и научные новости выходят в нашем телеграм-канале Хайтек+. Подпишитесь, чтобы быть в курсе.

Существующие системы захваты движений, как правило, делятся на два вида: инерционные и оптические. Первый вариант требует, чтобы пользователь носил набор датчиков для сбора данных о движении тела, и позволяет создавать трехмерные изображения после обработки полученной информации. Второй — оптический — выполняется в специальной студии и также использует дополнительное оборудование. Обе системы требуют значительных вложений как с точки зрения средств, так и времени на съемку. YunBo предлагает отказаться от обеих систем в пользу своей универсальной платформы.

Цифровой прорыв: как искусственный интеллект меняет медийную рекламу

Платформа YunBo не требует надевать инерционные датчики или маркеры. Снимки, сделанные с помощью обычных камер, анализируются синтетическим интеллектом, чтобы точно передать физические данные и воспроизвести все действия, включая выражения лица и движения пальцев. Процесс оцифровки занимает 30 секунд, а работа ИИ — 5 минут. Недавно YunBo начала работать в качестве самостоятельного поставщика виртуальных идолов и уже подключила к платформе более 10 тыс. пользователей. Сейчас платформа бесплатна — стартап собирает отзывы и дорабатывает алгоритмы ИИ. А в следующем году YunBo начнет предоставлять свои услуги в разработке компьютерных моделей другим компаниям.

«В будущем мы будем разрабатывать больше виртуальных идолов и поставлять их на стриминговые платформы с прямыми эфирами в качестве „Small K Company“. Мы также планируем выбрать несколько виртуальных идолов, которые будут обучаться и меняться, в зависимости от отзывов пользователей, а также будут проводить публичные мероприятия в прямом эфире», — заявили в компании.

По заявлениям стартапа, современные компании тратят более $150 тыс. на создание одного видеоклипа и более $3 млн. на проведение полноценного концерта с участием виртуальных идолов. Более того, зачастую создание таких персонажей стоит значительно дороже, чем продвижение артиста-человека. Как сообщает Asia Nikkei, этот вид развлечения постепенно выходит за рамки субкультур и пользуется спросом у крупных китайских компаний — ИТ-гиганты Tencent, ByteDance и iQiyi уже работают над собственными цифровыми кумирами.