arrow
返回

Motion-driven 4D scene generation

delete2026-07-31
delete0
PRE
AI
G
Guo-Wei Yang
Q
Qun‐Ce Xu *
Z
Zhao Wei
胡
胡事民 (Shi‐Min Hu)
DOI:10.1007/s11432-024-4881-ydelete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
近年来,图像/视频生成模型和学习型动态场景表示的进展使得4D场景的轻松创建成为可能。然而,如何实现更可控的运动生成而非仅提供高层文本提示的问题尚未得到充分探索。本文提出了一种创新方法,利用用户指定的动作路径来指导4D场景生成。运动控制的4D场景生成的主要挑战在于运动的时间变化以及高时间一致性要求。为解决这些问题,我们的方法引入了自适应运动对齐模块以增强生成运动的自然性,该模块动态同步动作路径域中的运动与时间域中的对应内容。此外,为减轻过度运动引起的伪影,我们引入了渐进式运动驱动模块,通过增强运动控制来确保高质量输出。实验结果表明,在执行运动控制的4D场景生成方面,我们的方法具有优越性。
Keyword:
4D generation
dynamic 3D scene
diffusion model
motion control
temporal consistency

期刊

S
Science China-Information Sciences
IF:
7.6
论文数:
149
被引数:
0

机构

D
department of computer science and technology
学者数:
61
论文数: 29
被引数: 0
引用论文

引用论文

3D Gaussian Splatting for Real-Time Radiance Field Rendering用于实时辐射场渲染的3D高斯Splatting
err2023-07-26
err485
errOAAI
errKerbl, Bernhard; Kopanas, Georgios; Leimkuehler, Thomas; Drettakis, George
err分享
err收藏