JarvisGUI：跨设备 GUI agent 的动态任
来自 arXiv · 期号 2026-09-10
摘要
现有的 GUI 评测只测单设备、静态任务，但真实场景里用户经常要在手机、电脑之间来回切换。 JarvisGUI 是一个新的动态评测框架，把任务定义为输入-输出变换，用一套轻量类型系统自动组合出跨设备工作流，在 Android、Windows、Ubuntu 三套系统上同时跑。 测试结果：当前最好的开源 GUI agent 在状态传递、跨平台上下文推理、长周期依赖管理上全部翻车——这些能力缺口在旧评测里完全看不到。