MNIST-PRO：MNIST以面向AI智能体的部分可观测世界形式回归
MNIST-PRO是一项用于研究AI智能体如何在部分可观测环境中构建和更新感知状态的基准测试。它将手写数字识别转换为基于连续视觉片段的搜索任务，并限制对先前观察结果的回看能力。研究使用四种记忆表示评估了10个多模态模型：原始视觉历史、文本状态、结构化网格地图和整合视觉画布。模型在完全可观测条件下表现良好，但部分可观测性暴露出明显的性能差距。研究发现三项主要瓶颈：整合零散视觉信息、持续探索直到观察完整序列，以及在后续证据相互矛盾时修正早期错误判断。结果表明，仅获取视觉证据并不足够，智能体还必须建立并持续更新可靠的感知状态。
本文来源：Hugging Face，仅供学习参考，版权归原作者所有。