EvolvingAvatar:随对话进展自适应的交互式3D头部生成
EvolvingAvatar是一种因果生成系统,可根据面部视频和音频,在对话过程中自适应地生成交互式3D头部动作。它无需动作标签作为训练目标,而是利用对话中的视听上下文进行测试时自监督学习。研究团队还推出了一个包含455.95小时对话视频的基准数据集。在最具挑战性的分布外测试中,随着对话展开,生成的表情统计与录制数据之间的差异最多降低了11.1%。
本文来源:Hugging Face,仅供学习参考,版权归原作者所有。