Компания представила прототип Menteebot. Робот использует технологии искусственного интеллекта, в том числе большие языковые модели на основе трансформаторов, ставшие популярными благодаря ChatGPT и другим подобным сервисам. Эти технологии применяются на всех уровнях его работы. Mentee выпустила видео, демонстрирующее, как робот с искусственным интеллектом воспринимает голосовую команду, обрабатывает требуемую задачу, формирует ответ и выполняет ее, включая передвижение, понимание окружающей обстановки, обнаружение объекта, его локализацию и захват.
Хотя человекообразные роботы существуют уже много лет, основное внимание в этой области уделялось улучшению взаимодействия машин с физическим миром, включая такие аспекты, как имитация человеческих движений и ловкости. Большинство роботов были либо запрограммированы заранее, либо управлялись программной платформой для выполнения конкретной задачи, например, перемещения коробок в контролируемой среде. Затем на сцену вышли большие языковые модели. Многие производители роботов вскоре внедрили эту технологию (в основном благодаря партнерским отношениям), чтобы дать своим гуманоидам возможность понимать, что просит пользователь на естественном языке, и выполнять эту задачу, одновременно обучаясь с течением времени. Mentee тоже занимается чем-то подобным, но вместо того, чтобы внедрять ИИ в существующего разрабатываемого робота-гуманоида, она работает над созданием андроида, где ИИ присутствует на всех уровнях его функционирования.
Прототип робота Menteebot преобразует команды, данные людьми, в сложные действия в реальном мире, используя ИИ на трех основных уровнях. Во-первых, он использует большие языковые модели на основе трансформаторов для интерпретации команд и «продумывания» необходимых шагов. Затем, используя алгоритмы на основе NeRF, он строит в режиме реального времени когнитивную 3D-карту окружающей среды с полной семантической информацией об объектах и предметах, а также локализует себя на карте, планируя динамический путь для обхода препятствий. В конце концов, он выполняет запланированные шаги с помощью метода машинного обучения «симулятор-реальность» (Sim2Real), который определяет необходимые движения в смоделированной среде и адаптирует их к реальному миру, управляя походкой и движениями рук.
Хотя робот, показанный в демонстрационном видео, выполняет базовую задачу по перемещению фруктов с одного места на другое на кухне, важно отметить, что он не делает это по одной единственной команде. Пользователь попросил робота пойти и подождать на кухне, а затем дал другую команду, чтобы он поднял и положил фрукты в другом месте. Остаётся открытым вопрос, сможет ли робот выполнить ту же задачу за один раз. Но, учитывая, что это прототип, можно ожидать, что робот со временем научится выполнять сложные команды без пошаговых инструкций. Это будет иметь решающее значение для практического применения робота в домашних условиях и на складах.
Mentee заявляет, что окончательная, готовая к производству версия гуманоида будет оснащена датчиками, работающими только с камерой; запатентованными электродвигателями, которые обеспечивают беспрецедентную ловкость; и полностью интегрированным искусственным интеллектом. Он будет готов к развертыванию в первом квартале 2025 года. Компания не сообщила, на какой сегмент она будет ориентироваться в первую очередь.
Многие другие игроки активно продвигаются в сфере гуманоидов с искусственным интеллектом, в том числе Tesla Илона Маска, а также компании Fig AI и 1X Technologies, поддерживаемые OpenAI. Nvidia также выпустила Project GR00T, базовую модель общего назначения для гуманоидов, и предоставляет ее многим игрокам отрасли — Agility Robotics, Apptronik, Boston Dynamics, Fourier Intelligence, Sanctuary AI, Unitree Robotics и XPENG Robotics. Boston Dynamics накануне представила нового полностью электрического робота-гуманоида Atlas, предназначенного также для автомобильного и промышленного применения.
