RynnUnify:迈向统一的具身智能大脑
RynnUnify是一款拥有160亿参数的统一具身模型,通过交错式视频—语言推理,将具身理解、长时视觉规划与机器人控制结合起来。模型具备空间推理、物理预测和落地能力;其基于强化学习的智能体扩展版本,可利用视频预测推理未观测状态和交互结果。另一项世界—动作扩展则将这些理解与预测能力转化为机器人控制。在评测中,RynnUnify在参与测试的统一多模态模型中取得最高平均具身理解得分,并在Rynn-VP上比Cosmos 3 Nano高9.75分。此外,它在选定的RoboCasa365任务中达到51.5%的成功率,在三项真实机器人任务中的平均成功率为46.7%。
本文来源:Hugging Face,仅供学习参考,版权归原作者所有。