Проект получил название Photo Wake-Up. Софт позволяет запечатленному на фотографии персонажу просто покинуть ее рамки. Анимированный герой будто выходит в реальный мир, и выглядит это круче, чем звучит.

Созданный в Вашингтонском университете алгоритм идентифицирует двумерный объект на статическом изображении. Этого достаточно, чтобы получить входные данные. Дальше полученный объект анимируется, рассказывает Futurism.

Его накладывают на подходящие движущиеся шаблоны, после чего анимация может «ходить, бегать, сидеть или прыгать, но уже в 3D.

В примерах оживают работы Пикассо, а баскетболист Стивен Карри и космонавт Нил Армстронг выходят из кадра. Разработчики говорят, что и раньше экспериментировали с такой техникой, но выходило гораздо хуже. В нынешней версии добавили распознавание частей тела, так что алгоритм отдельно анимирует ноги, руки и туловище.

Один из вариантов популяризации Photo Wake-Up — AR-приложения. Например, посетители музеев смогут оживлять героев картин в дополненной реальности. Те будут покидать свои рамки, втягивая посетителя в более активное изучение экспозиции.

В конце лета Nvidia представила ИИ-видеокарты, которые должны сделать трехмерные сцены неотличимыми от фотографий. Руководство убеждено, что новые чипы Quadro «произведут революцию в работе 50 миллионов дизайнеров, инженеров и художников по всему миру».