缺乏系统性的思维？评估推理模型在规则归纳任务中的表现
一项研究考察当前推理模型是否具备系统性思维，即能否将对一个概念的理解迁移到结构等价的变体任务中。研究人员扩展了认知科学领域的经典规则归纳任务，并通过重组和替换生成同构变体。结果显示，模型虽然常能正确解决某个具体任务，却经常无法处理结构等价的变体。研究表明，模型表现出的许多推理能力仍高度依赖评测时的具体语境，因此难以据此稳健地证明其具备普遍的认知能力。
本文来源：Hugging Face，仅供学习参考，版权归原作者所有。