InfinityEdit:利用轻量级编辑触发适配器实现无限视频编辑
这项研究提出了面向开放式视频流的连续编辑方法:模型在接收新的编辑指令时,持续生成并编辑后续视频片段。InfinityEdit通过一个轻量级适配器扩展流式视频生成器,该适配器包含历史交叉注意力、因果时间自注意力和编辑交叉注意力。该设计旨在保持视频的时间连续性,而不是逐帧重写源视频,并在编辑指令不断累积时维持稳定质量。适配器只在编辑指令到达的片段中启用,之后的片段由原始模型继续生成。作者报告的实验结果显示,InfinityEdit能够忠实地延续视频流,并在无限长度的编辑序列中保持稳定表现。
本文来源:Hugging Face,仅供学习参考,版权归原作者所有。