RealMe:利用少量拍摄数据生成沉浸式体积视频
论文提出 RealMe 框架,可利用稀疏、低分辨率的拍摄素材生成体积视频。该方法通过高分辨率视频扩散模型将素材增强至 2K,并兼顾不同视角之间的关系和时间一致性。此外,研究在潜在空间中使用频率损失,以缩小生成视频与真实拍摄素材之间的差距。作者称,在 DNA-Rendering 基准和自建 RealVV 数据集上的实验表明,RealMe 在视觉保真度和 4D 一致性方面优于现有方法。
本文来源:Hugging Face,仅供学习参考,版权归原作者所有。