ИИ Qwen научили проходить Genshin Impact как человек
habr.comОпубликован рассказ об ИИ-агенте Lumine на базе Qwen2-VL-7B, которого научили играть в Genshin Impact. Агент способен пройти основную сюжетную линию региона Мондштадт, которая у живых игроков занимает около пяти часов, с эффективностью, сопоставимой с человеком.
Также Lumine проходит следующие регионы, на которых он не обучался, и даже переносит навыки на другие похожие игры.Lumine работает в режиме реального времени: он обрабатывает изображение с игры пять раз в секунду и каждые 200 миллисекунд генерирует текстовое описание следующего набора действий, из которого извлекаются движения мышью и нажатия клавиш с частотой до тридцати обновлений в секунду.
