DramaChain Bench:短剧生成的端到端评测基准
DramaChain Bench 首次覆盖了 AI 短剧制作的完整流程,包括剧本、分镜、关键帧图像、镜头级视频和成品剧集。该基准采用 5 个评估维度,进一步细分为 63 个叶级指标。5,785 个项目由 3 名专业标注员独立评分,形成 17,488 个有效分数和 255,925 条可追溯的缺陷归因记录。人工标注表明,上游环节产生的缺陷会在后续流程中级联,最终剧集质量并不只取决于视频生成。基于智能体的自动评审系统以平均 PLCC 0.918 的结果复现了模型排名,从而有望在评估新模型时减少人工标注成本。
本文来源:Hugging Face,仅供学习参考,版权归原作者所有。