arrow
返回

Inst-Inpaint: Instructing to Remove Objects with Diffusion Models

delete2026-10-26
delete0
delete
OA
AI
A
Ahmet Burak Yildirim *
V
Vedat Baday
E
Erkut Erdem
A
Aykut Erdem
A
Ayşegül Dündar
DOI:10.1007/s11263-026-03110-9delete
delete原文链接
delete分享
delete收藏
查看原文
摘要

摘要

En 中文
图像修复任务是指从图像中擦除不需要的像素并以语义一致且逼真的方式填充它们。传统上,希望擦除的像素是用二进制掩码定义的。从应用的角度来看,用户需要为希望移除的对象生成掩码,这可能既耗时又容易出错。在本工作中,我们关注一种图像修复算法,该算法能够根据自然语言输入估计要移除的对象并同步移除它。为此,首先,我们构建了一个名为GQA-Inpaint的数据集用于此任务。其次,我们提出了一种名为Inst-Inpaint的修复框架,该框架可以根据作为文本提示给出的指令从图像中移除对象。我们设定了各种基于GAN和扩散的基线,并在合成和真实世界图像数据集上运行实验。我们使用不同的评估指标比较方法,这些指标衡量模型的质量和准确性,并展示了显著的定量和定性改进。有关发布的代码和数据集,请参考项目网页:http://instinpaint.abyildirim.com/
Keyword:
Instruction-based inpainting
Diffusion models
AI总结

AI总结

对已上传原文的论文进行重点信息的提取,主要内容包括:简要概述、研究摘要、背景介绍、关键亮点、图文解析、展望与总结。

期刊

International Journal of Computer Vision 封面图
International Journal of Computer Vision
IF:
9.3
论文数:
4.0K
被引数:
3.9W

机构

K
Koc University
学者数:
325
论文数: 143
被引数: 2.8K
B
Bilkent University
学者数:
140
论文数: 76
被引数: 56
H
hacettepe university
学者数:
608
论文数: 291
被引数: 4.3K
学者 查看更多机构
引用论文

引用论文

Zero-shot Image Editing with Reference Imitation
err2024-01-01
err0
PREAI
errChen,Mengting; Chen,Xi; Feng,Yutong; Liu,Yu; Shen,Yujun; Wang,Yiyang; Zhang,Shilong; Zhao,Hengshuang
err分享
err收藏
Blended Latent Diffusion混合潜伏扩散
err2023-07-26
err65
errOAAI
errAvrahami, Omri; Fried, Ohad; Lischinski, Dani
err分享
err收藏