WorldRover:面向世界探索、带有丰富标注的可扩展合成视频数据引擎
WorldRover 是一套基于 Unreal Engine 的管线,用于在艺术家构建的环境中生成长时段合成探索视频。系统可离线渲染持续数分钟的路线,同时保留完整的相机轨迹和场景几何信息。同一段探索路线可以在第一人称、第三人称和 360 度全景视角下,在不同环境状态中重新播放。研究团队利用该引擎构建了 WorldRover-10M 数据集,将 RGB 视频与度量深度、相机轨迹以及由轨迹推导出的动作信号配对。第三人称子集还提供密集光流、带可见性信息的远距离 2D/3D 点轨迹,以及独立于相机轨迹的角色轨迹。该系统旨在为需要构建、维护并重新访问一致世界表示的可探索世界模型提供训练数据。
本文来源:Hugging Face,仅供学习参考,版权归原作者所有。