★ 3
MAGE 框架用用户手册提升计算机使用智能体适应新软件能力
研究提出 MAGE 框架，将用户手册作为可扩展的流程知识来源，在推理时检索任务相关手册内容并由规划器生成显式流程指导，在训练时将手册转为可执行任务-计划对以引导环境探索。在六个应用上任务成功率超过强基线，减少了对人工标注演示数据的依赖。
arXiv cs.AI13 天前
#GUI 自动化
共 2 篇相关资讯，按重要度与时间排序，每 3 小时更新。
★ 3
Work2Skill 框架发布：从人类 GUI 操作中归纳可复用智能体技能
论文提出 Work2Skill 框架，通过 WorkRecorder 采集屏幕录制、鼠标键盘事件与无障碍树信息，构建首个同步多模态桌面 GUI 演示数据集 WorkDemo-350。其智能体技能归纳方法可产出含工作流规则、步骤依赖与完成校验的可复用技能，在 MyPCBench 与 OSWorld-…
arXiv cs.AI21 天前