arrow
返回

Differential Diffusion: Giving Each Pixel Its Strength

delete2025-04-14
delete0
delete
OA
AI
E
Eran Levin
O
Ohad Fried
DOI:10.1111/cgf.70040delete
delete原文链接
delete分享
delete收藏
查看原文
摘要

摘要

En 中文
扩散模型已经彻底改变了图像生成和编辑领域,在条件性和非条件性图像合成方面取得了最先进的成果。尽管现有技术能够使用户控制图像编辑中变化的程度,但可控性仅限于整个编辑区域的全局变化。本文介绍了一种新颖的框架,能够实现每像素或每图像区域变化量的定制。我们的框架可以集成到任何现有的扩散模型中,为其赋予这种能力。这种精细控制开辟了多样化的新编辑功能,例如控制单个对象的修改程度,或引入渐进的空间变化的能力。此外,我们展示了该框架在软填充(soft-inpainting)方面的有效性——即在完成图像部分区域的同时,微调周围区域以确保无缝集成。另外,我们引入了一种新工具,用于探索不同变化量的影响。我们的框架仅在推理阶段运行,无需模型训练或微调。我们使用当前公开的最先进的模型展示了我们的方法,并通过定性和定量比较以及用户研究进行了验证。我们的代码已发布并集成到多个平台。
AI总结

AI总结

对已上传原文的论文进行重点信息的提取,主要内容包括:简要概述、研究摘要、背景介绍、关键亮点、图文解析、展望与总结。

期刊

Computer Graphics Forum 封面图
Computer Graphics Forum
IF:
2.9
论文数:
566
被引数:
1.1W

机构

R
Reichman University
学者数:
1.1K
论文数: 1.2K
被引数: 5
T
Tel Aviv University
学者数:
3.7W
论文数: 3.0W
被引数: 3.6W
引用论文

引用论文

err分享
err收藏
RePaint: Inpainting using Denoising Diffusion Probabilistic Models
err2022-06-01
err0
errOAAI
errAndreas Lugmayr; Martin Danelljan; Andres Romero; Fisher Yu; Radu Timofte; Luc Van Gool
err分享
err收藏
err分享
err收藏
Imagic: Text-Based Real Image Editing with Diffusion Models
err2023-06-01
err0
errOAAI
errBahjat Kawar; Shiran Zada; Oran Lang; Omer Tov; Huiwen Chang; Tali Dekel; Inbar Mosseri; Michal Irani
err分享
err收藏
ImageNet Large Scale Visual Recognition ChallengeImageNet大规模视觉识别挑战
err2015-04-11
err2.7W
PREAI
errRussakovsky, Olga; Deng, Jia; Su, Hao; Krause, Jonathan; Satheesh, Sanjeev; Ma, Sean; Huang, Zhiheng; Karpathy, Andrej; Khosla, Aditya; Bernstein, Michael; Berg, Alexander C.; Fei-Fei, Li
err分享
err收藏
err分享
err收藏
Text2LIVE: Text-Driven Layered Image and Video Editing
err2022-10-31
err0
PREAI
errOmer Bar-Tal; Dolev Ofri-Amar; Rafail Fridman; Yoni Kasten; Tali Dekel
err分享
err收藏
学者 查看更多内容