不可逆火灾损伤后的物体理解特征恢复
该研究提出了 TRACE，这是一个用于理解火灾后环境中物体的基准数据集。TRACE 包含 2.14 万个基于真实图像的合成场景，以及从完好状态到受损状态的配对变化过程，覆盖 189 个类别中的 499 个物体身份。研究评估受损物体检测、原始状态恢复、原始材料识别、描述生成和功能推理等任务。随着损伤程度加重，现有模型的性能显著下降。研究提出的特征恢复模块在冻结主模型的情况下，将受损编码器特征映射到与完好状态对齐的表示，并改善检测、检索、材料恢复、描述生成和功能推理等多项视觉语言任务。
本文来源：Hugging Face，仅供学习参考，版权归原作者所有。