Hitech logo

Обучение машин

OpenAI запустила MMORPG для искусственного интеллекта

TODO:
Георгий Голованов5 марта 2019 г., 08:15

Время, когда ИИ обойдет человека в World of Warcraft, не за горами: OpenAI разработала тренировочную площадку для прорывного алгоритма Neural MMO. В многопользовательской RPG ИИ-агенты будут сражаться за обладание ресурсами.

Самые интересные технологические и научные новости выходят в нашем телеграм-канале Хайтек+. Подпишитесь, чтобы быть в курсе.

ИИ-агенты будут случайным образом возникать в Neural MMO, которая состоит из автоматически сгенерированных карт заданного размера. Некоторые элементы ландшафта проходимы — например, лес или трава, а другие нет, как вода или камень. Исходя из своего положения агенты смогут за один раунд выполнить одно передвижение и одно действие: собрать ограниченное количество ресурсов (пищи или воды) или вступить в бой (ближний, дальний или магический) с другим агентом, пишет VentureBeat.

Побеждает тот, кто продержится дольше всех. Разработчики OpenAI исходят из того, что чем длительнее агенты взаимодействуют друг с другом, тем лучше они лучше они учатся выполнять определенные задачи.

Кроме того, в OpenAI обнаружили, что увеличение популяции ИИ заставляет агентов распространяться по различным частям карты и что те из них, кто тренировался на большом пространстве, превосходят тех, кто теснился на маленькой карте.

Это напоминает поведение животных в природе. Если они равны по силе и не могут победить друг друга, они пытаются разойтись подальше, чтобы избежать конфликта.    

«Массовые многопользовательские онлайн-игры моделируют большие экосистемы с переменным числом игроков, соревнующихся продолжительное время в обширном пространстве, — пишут разработчики в блоге. — Включение нескольких агентов и людей приведет к появлению новых возможностей для исследования, формированию новых ниш и повышению компетентности».

Neural MMO доступна на GitHub и поддерживает до 128 агентов на каждом из 100 серверов. Требования к вычислительным мощностям довольно низкие — достаточно одного процессора.

Это не первая подобная платформа. В декабре OpenAI выпустила CoinRun, классический платформер, предназначенный для оценки способности ИИ переносить свой опыт на незнакомую среду. А в августе исследователи норвежского Университета Адгера предоставили ИИ-агентам доступ к стратегии в реальном времени.

В прошлом году Минобороны Великобритании опубликовало доклад об опасностях ИИ, который оттачивает свои навыки, играя в стратегические видеоигры. Эти навыки, считают военные, можно легко использоваться для ведения боевых действий или планирования террористических актов.