Исследователи из Северо-Западного политехнического университета в провинции Шэньси использовали большие языковые модели в практических приложениях. Благодаря этой технологии дроны получили «человеческий мозг» и могли общаться друг с другом на естественном языке. Ученые использовали китайскую языковую модель с открытым исходным кодом, известную как InternLM.

Разработчики провели эксперимент по поиску ключей в парке с участием пяти дронов. После того, как пользователь поручил дронам искать предмет, трое из них незамедлительно и «добровольно» использовали свои навыки поиска. В то же время два других дрона, оснащенные захватами, сообщили группе, что они могут «поднять» ключи. Распределение задач внутри кластера дроны провели самостоятельно.

Каждому из четырех дронов была назначена определенная область для поиска ключей. В процессе поиска дроны координировали свои движения — они создали упрощенную карту местности, которая помогала им направлять свои усилия. При этом они идентифицировали людей-операторов и избегали их на своем пути, обеспечивая более безопасные полеты.

Дроны, оснащенные датчиками и алгоритмами, могли воспринимать окружающую среду под разными углами и адаптироваться к ней. Это называется проактивным экологическим сознанием. Дроны также могли корректировать статус полета в режиме реального времени на основе обратной связи.

Как только ключи были найдены, дроны поделились с пользователем их изображениями через групповой чат для подтверждения. Такой уровень диалога повышает стабильность и безопасность при выполнении сложных задач. «Групповые чаты» дронов также помогают сделать мышление машин прозрачным для людей, позволяя исследователям лучше понять их поведение.

Эта технология имеет потенциал для использования при проверках безопасности, оказании помощи во время стихийных бедствий, а также в транспортировке и логистике с использованием дронов.