World Labs разрабатывает так называемые модели мира (world models), которые должны не просто распознавать отдельные объекты на изображениях, но формировать представление о пространстве, его геометрии и взаимосвязях между объектами. Стартап рассматривает такие модели как основу для систем, способных понимать окружающую среду, предсказывать последствия действий и взаимодействовать с виртуальным и физическим миром.
Для AMD приобретение World Labs означает усиление направления физического ИИ и собственных исследований в области моделей. Компания стремится сократить разрыв с Nvidia, которая уже развивает модели мира вроде Cosmos и программную экосистему вокруг своих чипов. По словам AMD, разработки стартапа помогут определять дальнейшее развитие ее аппаратного и программного обеспечения, а также вычислительных систем. Техническое сотрудничество компаний началось еще в прошлом году — они совместно работали над обучением моделей и оптимизацией их работы на графических процессорах AMD.
В сентябре World Labs представила Atlas — модель пространственного интеллекта, которая может восстанавливать реальные пространства по нескольким фотографиям, генерировать новые ракурсы и трехмерные представления сцен, а также моделировать изменения объектов и окружающей среды во времени. World Labs также использует Atlas для робототехники: модель способна создавать виртуальные среды и генерировать данные о том, что робот будет «видеть» во время движения или взаимодействия с объектами.
В начале этого года World Labs привлекла $1 млрд в рамках раунда финансирования, в котором участвовала и AMD. Помимо нее, инвесторами стали Nvidia, Autodesk, Fidelity Management & Research Company, Emerson Collective и другие компании.
Фэй-Фэй Ли — профессор компьютерных наук и известная исследовательница в области компьютерного зрения. Она стала одним из создателей ImageNet — крупного набора данных и системы тестирования, которые сыграли важную роль в развитии современных методов глубокого обучения и компьютерного зрения. В 2017–2018 годах она работала вице-президентом и главным научным сотрудником по ИИ и машинному обучению в Google Cloud.
После завершения сделки Ли станет исполнительным вице-президентом и главным научным сотрудником AMD и будет подчиняться генеральному директору компании Лизе Су. Ожидается, что сделка будет закрыта до конца 2026 года. Таким образом, World Labs получит доступ к ресурсам производителя чипов для дальнейшей разработки моделей, работающих с физическим миром.
