SuperNav:适用于各种任务和场景的智能体导航系统
SuperNav是一套面向服务机器人的导航系统,由模型解读请求、理解场景,并将移动执行交给专用导航工具。其智能体框架为预训练多模态大语言模型配备导航技能、物理交互工具,以及任务进度和上下文管理功能,无需针对导航任务微调模型。统一的视觉点位接口允许模型直接在图像中指定目的地,并根据执行反馈调整决策。评测显示,SuperNav在单物体、多物体和按需任务中优于四种基线系统。在HM3D上的评测以及在真实四足机器人上的部署,也展示了其在不同环境中的应用能力。
本文来源:Hugging Face,仅供学习参考,版权归原作者所有。