DuoMatching:通过联合与边缘分布匹配实现少步视频生成
DuoMatching 是一种用于流式视频生成的蒸馏框架,在联合分布匹配之外加入由图像生成器提供的逐帧监督,将互补的视觉和语义信息迁移到视频模型中。LatentBridge 用于处理两种模型潜在表示之间的差异;Latent Variation Sampling 则将监督分配到不同的时间片段。实验结果显示,该方法提升了视觉质量、构图和语义对齐,同时基本保留了运动动态。在人工评估中,相较于所有受测基线方法,DuoMatching 的总体偏好率均超过 80%。
本文来源:Hugging Face,仅供学习参考,版权归原作者所有。