UI-Mate通过上下文示范推进开放权重基础GUI智能体
UI-Mate是一款用于自动化复杂数字任务的基础GUI智能体,将基于环境的训练体系与多模态示范的上下文学习相结合。该体系可在大规模并行环境中自动完成任务生成、环境构建、执行、筛选、监督微调和在线强化学习。研究团队还推出了OSWorkerBench,涵盖41个应用中的100项长流程办公任务,并区分了针对相同目标的自我示范和针对相关任务的人类变体示范。UI-Mate-27B在OSWorld-Verified上取得77.0%的成绩,在WindowsAgentArena上取得66.2%的成绩;研究称其达到通用计算机操作基准中开放权重模型的最高水平。在OSWorkerBench上,该模型的严格成功率为41.0%,进度率为76.9%。在自我示范子集上,加入一个示范后,严格成功率从17.2%提升至35.4%。
本文来源:Hugging Face,仅供学习参考,版权归原作者所有。