TRACE：流式视频理解的时间审计与条件感知评估
TRACE 是一个面向流式视频理解的基准测试与评估框架。它衡量证据何时变得有效、视觉历史如何被处理，以及系统何时触发响应。研究人员使用来自 517 个视频的 1,240 条记录，在 8 种配置下评估了 8 个公开模型或系统。结果表明，即使问答准确率几乎相同，完成度、答案有效性和生成负载也可能存在显著差异。对于主动响应系统，TRACE 还分别评估响应质量、延迟、误报以及错过的目标时间窗口。该基准测试和代码已公开。
本文来源：Hugging Face，仅供学习参考，版权归原作者所有。