#GUI智能体

共 8 篇相关资讯,按重要度与时间排序,每 3 小时更新。

★ 4

BlueLM-GUI:面向自改进移动GUI智能体的真机飞轮

论文发布BlueLM-GUI,一个35B-A3B移动GUI智能体,以真机为中心的飞轮设计解决沙盒训练分布失配、真机失败未充分利用、固定基准饱和三大部署痛点。通过双轨数据管线、三阶段训练配方与配额驱动基准方法,模型在MobileGUI-VBench达87.4分,超越最佳闭源模型5.1分,Androi…

arXiv cs.AI48 天前
★ 4

UI-Venus-2:通用GUI智能体技术报告

UI-Venus-2是跨移动、网页和桌面环境的通用GUI智能体,通过统一闭环推理行动框架扩展环境、任务和验证。覆盖170多个多语言应用,集成安全机制,开源推动实用化。

arXiv cs.AI60 天前
★ 3

MaP:掩码轨迹预测的GUI智能体导航

论文提出MaP统一框架,通过将多轮GUI交互建模为轨迹并以组件掩码预测定义训练目标,把优化从任务特定边缘分布转为一致目标,缓解梯度冲突。同时设计角色感知适配器学习模块处理数据异质性,在五个GUI导航基准上显著优于直接混合训练。

arXiv cs.AI39 天前
★ 3

GUI智能体易受数字助推影响,推理反而放大社交诱导

研究基于双过程理论,用3600个智能体、21600次模拟测试三家厂商六款前沿模型,发现基于LLM的GUI智能体对自动型与反思型数字助推均存在脆弱性。推理配置产生相反方向的调节作用:降低对默认选项助推的敏感度,却提高对社交影响助推的敏感度。研究将界面设计提升为组织委托自主智能体决策时的治理议题。

arXiv cs.AI44 天前
★ 3

反思-修订-复用:GUI智能体的免训练技能进化

论文提出EvoSkill-GUI,让GUI智能体在部署时无需额外训练即可根据执行反馈修订技能。技能以结构化多文件包形式存在,通过反思-修订-复用循环迭代。在MobileWorld、AndroidWorld、OSWorld三大基准上分别最高提升16.2%、6.0%、10.5%。

arXiv cs.LG45 天前
★ 3

WM-R1:用世界模型训练GUI智能体

论文提出WM-R1框架,用世界模型替代真实环境训练移动GUI智能体,消除对真实环境交互的依赖,支持大规模并行和细粒度轨迹生成。实验表明,WM-R1训练的智能体在Android基准上显著优于基线方法。

arXiv cs.AI62 天前
★ 2

面向 GUI 智能体记忆的动作条件双模拟

论文提出以动作条件双模拟作为 GUI 智能体记忆的状态合并规则,基于冻结智能体构建的经验预测状态图,仅当共享动作导致一致结果时才合并状态,不依赖观察相似度且无需训练。在 MiniWoB++ 上相较无记忆智能体提升了成功率,而对照组方法均无改善。

arXiv cs.AI31 天前
★ 2

GUI-Hopper:用应用原生深链增强移动 GUI 智能体

移动 GUI 智能体通常依赖点击、滑动等屏幕级操作,效率受限于逐屏导航。论文提出混合交互范式:用应用深链直接跳转,用 GUI 操作完成其余屏幕内操作并作为兜底。作者通过静态分析发现候选深链、在真机验证并描述落地页面,构建了经验证的深链目录,并据此提出 GUI-Hopper,在真实商用应用上提升了任…

arXiv cs.AI34 天前

相关标签

GUI智能体 最新资讯与动态(8 篇) - 智讯 AI News