相关但不完整：指涉悬空揭示硬提示压缩的根本性失效模式
一项研究发现，当系统独立评估并选择词元、句子或文本块时，硬提示压缩可能破坏关键的指涉关系。如果答案被保留，但用于理解答案的实体被删除，就会产生“指涉悬空”。在0.30的压缩率下，多个基准测试中最多有60%的案例出现这一问题。重新插入缺失的支持段落后，准确率提高了29至34个百分点。一个用于自动判断被删除句子是否必要的小型分类器，在压缩率几乎不变的情况下，使HotpotQA准确率提升4.7个百分点。研究人员认为，压缩系统除了优化相关性，还必须保证指涉完整性。
本文来源：Hugging Face，仅供学习参考，版权归原作者所有。