AutoDataBench:加速自动化研究的数据中心测试平台
AutoDataBench 是一个受控测试平台,用于评估大语言模型智能体诊断、组织和改进训练数据的能力。平台固定框架、超参数和计算预算等其他因素,并通过三项任务测试数据优化。研究还考察模型能否预测数据干预的影响,而不只是依赖反复试验。将 AutoDataBench 的实验轨迹用于中期训练后,下游编程表现有所提升。代码和资源现已公开。
本文来源:Hugging Face,仅供学习参考,版权归原作者所有。