米哈游崩坏 AI 研发团队联合多家高校开源了 Gamer 游戏智能体,它属于视觉 - 语言 - 动作 VLA 基础模型,特点是可以一边看游戏画面、一边做任务规划,已经在《崩坏:星穹铁道》里完成长时主线任务、场景探索、解谜、战斗等连贯操作,它不需要读取游戏内存、不调用游戏内部 API,只靠采集屏幕画面,输出键鼠操作指令,和真人玩家操作方式一样,适合用来做长周期连续游戏任务的智能体研究,同时也能适配多款 2D、3D 游戏环境。Gamer 专门针对长时任务做了记忆和推理模块设计,分成短期画面记忆、长期任务记忆,解决普通 AI 玩游戏容易遗忘目标、中途跑偏的问题,配套自研 Streaming-vLLM 推理引擎,降低画面输入到动作输出的延迟,让操作响应更跟手。以往很多游戏 AI 只能做短回合、单一动作,很难跑完一整条主线这种跨度很长的任务,Gamer 的核心改进就是把感知、记忆、规划、行动串成闭环,在长时间任务里持续记住任务目标,根据画面变化调整操作方案。
Gamer 游戏 Agent 核心信息清单
- 模型定位:长时程实时游戏通用视觉语言动作基础 Agent
- 输入方式:5Hz 屏幕画面截图,只识别画面像素,不读取游戏内部数据
- 输出方式:键鼠操作指令,动作输出频率 30Hz
- 训练流程:持续预训练→稀疏思考指令微调→时序感知强化学习
- 配套引擎:Streaming-vLLM,在 H200 显卡上可以大幅压缩推理延迟
- 公开范围:开源基础代码、论文、基础预训练权重;星穹铁道专属训练数据、微调后的模型权重暂不开放
- 官方定位:学术研究项目,可用方向:游戏自动化测试、无障碍辅助、人机交互研究
这个 Gamer 游戏 Agent 的核心优势
- 长任务规划能力:自带长短记忆模块,跑星穹铁道主线这种多步骤长任务不容易丢失目标
- 通用性强:统一一套模型框架,支持多款不同类型 2D、3D 游戏,不是单游戏专用脚本
- 接入门槛低:不需要游戏厂商开放接口,只要能正常采集画面,就能运行 Agent
- 推理速度优化:Streaming-vLLM 引擎减少延迟,满足实时游戏交互的要求
研究复现上手步骤
- 前往项目开源仓库,下载 Gamer 基础代码、论文、基础预训练权重
- 准备推理硬件环境,推荐 NVIDIA H200 显卡,配置 Streaming-vLLM 依赖环境
- 搭建画面采集程序,设置 5Hz 画面采样,对接模型输入接口
- 加载基础模型,输入游戏画面,模型输出键鼠动作指令,完成闭环交互
- 基于自有游戏数据集做微调,定制适配对应游戏的任务规划逻辑
总的来说,Gamer 游戏 Agent 给长时序交互智能体提供了新的研究底座,在星穹铁道长主线任务上的演示,证明了纯视觉输入的游戏智能体可以完成复杂、多步骤的连续任务,但是它仅限学术研究使用,官方明确禁止用作游戏外挂、自动脚本破坏游戏公平。
【相关 FAQ】
问题 1:米哈游开源的 Gamer 游戏 Agent,挑战崩坏星穹铁道长时主线任务靠什么实现?
回答 1:米哈游开源的 Gamer 游戏 Agent 依靠视觉语言动作框架 + 长短记忆模块,边观察游戏画面边做任务规划,只采集屏幕画面输出键鼠指令,以此挑战崩坏星穹铁道长时主线任务。
问题 2:Gamer 游戏 Agent 可以直接用来自动刷崩坏星穹铁道开拓力吗?
回答 2:Gamer 游戏 Agent 是学术研究项目,官方明确禁止把 Gamer 游戏 Agent 用于崩坏星穹铁道自动刷任务、挂机作弊这类破坏游戏公平的场景,仅支持游戏测试、无障碍、科研用途。
问题 3:开源的 Gamer 游戏 Agent,有没有放出崩坏星穹铁道专属训练权重?
回答 3:开源的 Gamer 游戏 Agent 只开放基础预训练权重和代码,出于安全考虑,崩坏星穹铁道相关训练数据、专门微调后的模型权重没有对外公开。
【参考资料】
[2026-11-18](米哈游 Gamer 游戏 Agent 详解,长时序游戏智能体落地)36 氪
[2026-11-17](米哈游公布通用视觉语言动作基础模型 Gamer,可自主游玩崩坏:星穹铁道)IT 之家
[2026-11-16](miHoYo Trains an 8B Model to Play Star Rail in Real Time)AILog
【免责声明】
本文内容仅为 AI 开源项目资讯整理,不构成技术采购、商用开发、游戏使用建议;Gamer 游戏 Agent 的开放范围、使用限制以米哈游项目主页、论文说明为准;禁止将该 Agent 用于游戏外挂、自动化挂机等违规行为,违规使用带来的账号、法律风险由使用者自行承担。
