Realtime-Bench评估大模型实时交互能力,报道称GPT-6-Astra成功率为44%
据报道,英伟达、得克萨斯大学奥斯汀分校等机构推出了Realtime-Bench,包含八类场景、共50项任务,用于评估实时感知、时间自适应推理和行动时机。文章称,在环境按照实际推理耗时推进的条件下,排名最高的GPT-6-Astra任务成功率为44%。报道还指出,仅提高推理强度或降低延迟,无法解决动态交互中的难题。不过,文章没有提供足够细节,无法据此独立核实该基准或测试结果。
本文来源:AIbase,仅供学习参考,版权归原作者所有。