返回
Iris3D: 3D Generation via Synchronized Diffusion Distillation
DOI:10.1145/3759249.png)
摘要
En 中文
我们介绍Iris3D,一种新颖的3D内容生成系统,该系统能够生成生动的纹理和详细的3D形状,同时保留输入信息。我们的系统集成了多视角大型重建模型(MVLRM [Li et al. 2023b])以生成粗略的3D网格,并引入了一种名为同步扩散蒸馏(SDD)的新型优化方案用于细化。与基于分数蒸馏采样(SDS)的先前细化方法不同,这些方法由于不同视角和模态间的歧义而遭受不稳定的优化和几何过度平滑问题,我们的方法能够以无训练的方式从2D扩散模型中有效地蒸馏出一致的多视角和多模态先验。这实现了对3D表示的稳健优化。此外,由于SDD是无训练的,它保留了扩散的先验知识并减轻了潜在的退化。这一特性使其与IP-Adapters和ControlNet等先进的2D扩散技术高度兼容,能够通过附加的条件信号实现更可控的3D生成。实验表明,我们的方法能够生成具有合理纹理和复杂几何细节的高质量3D结果。
期刊
IF:
9.5
论文数:
4.8K
被引数:
3.6W
机构
暂无机构信息

