arXiv · 机器人与计算机视觉· Changran Liu, Qi Wu, Wenchao Ma, Sharon X. Huang, Haomiao Jiang·· 9 天前AI 评分72
从游戏生成到游戏游玩:面向视觉语言动作模型的完全自动化能力训练
From Game Generation to Game Playing: Fully Automated Ability Training for Vision-Language-Action Models
AI 导读
针对收集演示成本高限制 VLA 模型跟随多样化游戏玩法指令的问题,作者提出 Script2Play 框架。该框架利用 LLM 驱动的智能体构建可执行的游戏环境与任务,并通过程序化专家基于仿真状态生成分配指令、渲染观测及键盘鼠标操作。
来源:arXiv · 机器人与计算机视觉 · arxiv.org