新工具 GitHub · OpenMobile2(项目主页 os-copilot.github.io/OpenMobile2-Home)
用浏览器里的 OpenMobile-2 模拟器,手点手机 app 并调用 app-native 工具,看 GUI 与工具
在网页内跑的 MobileGym++ 手机模拟器里手动完成一次跨 app 操作并调用工具面板,得到 GUI 与工具共同读写同一状态的可观察结果,并可用轨迹查看器回放他人回合
效果
本站不托管截图或视频;网页内可直接操作模拟器面板,并提供轨迹查看器逐次回放动作理由与工具调用,原站没有结果截图以外的独立录屏说明。
这是什么
新在哪里:以前开放移动 agent 的体验只有几十个模拟器 app 或私有轨迹,商业 app 难以干净重置;现在整个手机跑在浏览器里、一键重置,且 50+ 个 app 的 300+ 个 app-native 工具可与 GUI 动作交错调用,环境、数据、模型与研究代码一并开源。
怎么做到的:打开主页内嵌的 live demo:模拟器无需服务器,整机在浏览器内运行,状态是一份可一键重置的快照;在屏幕上操作 app 的同时,从旁边面板调用前台 app 的工具,工具 handler 与屏幕读写同一 store,并返回结构化回执或错误码;再打开轨迹查看器,按 app、GUI-only/混合模式、是否用工具筛选已录制回合,逐次回放动作理由与工具调用。
- 适合谁
- 对移动 GUI agent 感兴趣、想亲手在浏览器模拟器里点 app 并调用工具面板的开发者与研究学习者
- 能帮你
- 用零安装的浏览器模拟器与轨迹回放,直观看到 GUI 动作与 app-native 工具共享同一状态,并可直接接手开源环境、数据与配方
评分 三项分开看,不合成总分;热度不等于好用
- 新颖性
- 全新做法 · 2026-10-19 出现
- 热度
- 未知
- 易上手
- 需要一些准备
怎么评的
三项都由本站记录的事实按固定规则算出,编辑不能直接改档位;规则改动会写进更新说明。
新颖性
- ●●● 全新做法,且有来源依据的出现时间在最近 30 天内
- ●●○ 老工具新用法或近期刚开放,且有来源依据的时间在最近 30 天内
- ●○○ 出现时间超过 30 天、未核实到精确日期,或已不再是新做法
- 其他 出现时间未核实、晚于今天,或新颖类型未核实时按最低一档处理,不靠猜测加分
热度
- ●●● 最近一次每周人工确认为“热门”:最近 14 天里独立讨论、实际案例、持续时间、传播平台、相对关注五项门槛全部满足(规则 heat-v1)
- ●●○ 最近一次人工确认为“观察中”:前三项至少一项达到,或讨论增长 ≥ 50%,且至少 2 个独立案例
- ●○○ 最近一次人工确认为“未进入跟踪”
- 其他 还没有人工确认过的热度记录时显示“未知”。热度只统计本站已接入的信源,不代表全网
易上手
- ●●● 准备门槛低且难度入门:不需要新账号或付费,首次尝试不超过 30 分钟,公开可用,会复制粘贴即可
- ●●○ 准备门槛中等,或门槛低但需要改少量代码或配置
- ●○○ 准备门槛高:需要商业软件或付费服务、首次尝试超过 2 小时、特殊硬件或网络、排队或邀请且无替代方案,或需要专业知识
- 其他 只有介绍、还没有站内步骤,或关键步骤已失效时显示“暂不可试”;门槛未核实时显示“未核实”
怎么尝试
- 时间 首次约 15 分钟
- 费用 免费(模型调用另计):原站未说明费用;网页仅说明环境、数据、模型与代码均公开释放,训练需自备算力(推荐帖称“训练需算力”,演示免费)。
- 账号 不需要新账号
- 环境 浏览器(需可联网加载模拟器 app);若要自行训练或跑评测,需另备算力与 GitHub/Hugging Face 上的开源代码与数据
- 准备 浏览器:打开内嵌 live demo 操作模拟器与工具面板、使用轨迹查看器
- 准备 网络:预览版通过网络加载模拟 app
- 准备 算力环境(选用):若要按 SFT/RL 配方复现或训练自己的 agent
- 准备 GitHub 与 Hugging Face 访问(选用):取用 MobileGym++ 代码、OpenMobile-Data 数据集与模型权重
替代方案:没有有效替代方案。能做到:网页以自家 MobileGym++ 模拟器、app-native 工具与 OpenMobile-Data 为唯一配套,未见其他等价入口;差别:。
完成替代方案不算复现本实践。
按下面的步骤就能做出第一个结果。复制命令不会自动执行。
打开 live demo 模拟器
访问 https://os-copilot.github.io/OpenMobile2-Home/ ,滚动到 Live demo 一节,页面内直接加载整个手机模拟器与旁边工具面板;如首次加载慢,可稍等网络加载完成。
预期结果:页面内出现可交互的手机模拟界面与工具面板
手动点按完成一次 app 内操作
在模拟器屏幕上按界面操作某个 app(如把商品加入购物车),注意页面说明:屏幕与工具 handler 读写同一个 store。
预期结果:界面状态随操作更新
从工具面板调用前台 app 的工具
在前台 app 对应面板中调用一个 app-native 工具(如 add_to_cart),观察调用返回结构化回执。
预期结果:返回包含输出或错误码的结构化回执,且 GUI 渲染的状态与工具写入一致
打开轨迹查看器回放
进入 https://os-copilot.github.io/OpenMobile2-Home/viewer.html ,按 app、模式与是否使用工具筛选已录制回合(内容含 Gemini 3.1 Pro Preview 在 hybrid 模式下逐步回放并附每步理由与工具调用)。
预期结果:看到按条件筛选出的回放列表,可逐次 tap 查看动作理由
进阶:取用开源环境与数据
按需前往 MobileGym++(https://github.com/OpenMobile2/MobileGym-plusplus )、OpenMobile-Data(https://huggingface.co/datasets/OpenMobile-2/OpenMobile-Data )与 Code(https://github.com/OpenMobile2/OpenMobile2-Code )查看模拟客户端、轨迹任务与 SFT/RL 配方;训练需自备算力。
预期结果:获得环境、数据与配方仓库/数据集页面,可进一步自行复现