Компания miHoYo представила ИИ-агента Gamer, способного играть в видеоигры. Для этого ему не нужен доступ к игровому коду — нейросеть ориентируется на происходящее на экране, как обычный геймер.
Honkai: Star Rail
Принцип работы Gamer довольно прост. ИИ-агент анализирует изображение на экране с частотой пять кадров в секунду, после чего самостоятельно решает, какие кнопки клавиатуры нажать и как переместить мышь. Причем агент умеет запоминать предыдущие действия и планировать дальнейшие шаги.
Возможности ИИ-агента уже проверили на игре Honkai: Star Rail от miHoYo — и вполне успешно. Gamer смог перемещаться по игровому миру, решать головоломки и даже побеждать противников в боях. Впрочем, не все получилось идеально. Как отмечает miHoYo, наиболее продвинутая версия ИИ-агента в среднем показывала эффективность в 49,7%.
miHoYo собирается в ближайшее время выложить в открытый доступ движок, который лежит в основе Gamer. Вот только для работы с ним необходимо мощное железо — сама компания использовала процессоры NVIDIA H200.
Gamer — это совместный проект miHoYo и исследователей из Университета Цинхуа и Национального университета Сингапура. По словам разработчиков, в будущем ИИ-агент сможет пригодиться для изучения взаимодействия человека с компьютером, автоматизированного тестирования игр и создания инструментов, которые помогут играть людям с ограниченными возможностями.
