跳到正文
arXiv · 机器人与计算机视觉· Ziyi He, Xian Wu, Qiyuan Chen, Haitao Li, Cehao Yang, Yinghao Zhu, Xichen Zhang, Xiao Chen, Yushi Feng, Lequan Yu·· 12 小时前AI 评分68

MobileWeave:基于程序的移动 GUI 代理训练任务合成方法

MobileWeave: Program-First Synthesis of Dependency-Linked Tasks for Training Mobile GUI Agents

AI 导读

针对原生移动 GUI 代理需要大规模覆盖单功能与跨应用工作流轨迹的问题,现有合成管线生成自由文本导致隐式子目标依赖关系缺失。本文提出 MobileWeave,将每个任务合成为源自可控制仿真器应用实现的执行程序,抽象为带语义类型的有向能力图,通过显式的值与对象依赖组合原子程序为单/跨应用复合程序,并通过原生执行验证指令与完成检查。

来源:arXiv · 机器人与计算机视觉 · arxiv.org