arrow
返回

EAI-DMCU: Evolutionary algorithm-inspired diffusion model for concept unlearning

delete2026-04-28
delete0
PRE
AI
L
Long Xue
Y
Yixin Yao
B
Bin Song *
DOI:10.1016/j.eswa.2026.132466delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
文本到图像(T2I)模型是指基于文本提示生成图像的模型。扩散模型是目前预训练T2I模型中最突出的类别。然而,预训练T2I扩散模型中不希望的概念“知识”在文本提示引导下可能导致生成侵犯版权、冒犯性或有害内容,带来伦理挑战。为此,提出了概念遗忘任务,要求模型不仅无法生成不希望的目标概念(即遗忘有效性),还要保留其他非目标概念的生成保真度(即先验保留)。现有方法在遗忘目标概念时往往显著降低非目标概念的生成保真度,揭示了先验保留的显著不足。受进化算法启发,我们从定向选择的角度解释扩散模型中的概念遗忘任务。概念遗忘任务可被视为在满足群体选择特定要求的高维连续空间中进行的进化过程。因此,在概念遗忘任务中,非目标概念的先验保留能力取决于进化过程中非目标概念特征的保留。借鉴进化算法分析的见解,我们提出了一种新的概念遗忘方法,称为EAI-DMCU。我们将EAI-DMCU分为迭代进化阶段和定向选择阶段。在迭代进化阶段,EAI-DMCU保持目标概念上下文的交叉注意力图不变性,在保留其语义的同时保留非目标特征,最终提升其先验保留。在定向选择阶段,设计了一种特征空间解耦损失,以无监督方式分离输入提示中的目标和非目标概念,从而提高保留与丢弃个体的区分度,增强EAI-DMCU的遗忘有效性。通过这一过程,EAI-DMCU引导扩散模型的参数更新以实现概念遗忘目标。实验结果表明,EAI-DMCU在五种概念遗忘任务(物体、艺术风格、名人、角色和裸露内容)中表现出优越性能,验证了所提出方法的有效性。
Keyword:
concept unlearning
diffusion models
evolutionary algorithms
text-to-image generation
prior preservation

期刊

Expert Systems with Applications 封面图
Expert Systems with Applications
IF:
7.5
论文数:
2.9W
被引数:
10.2W

机构

X
xidian university
学者数:
6.6K
论文数: 2.2K
被引数: 0
X
Xidian University
学者数:
2.4W
论文数: 1.9W
被引数: 9.7K
引用论文

引用论文

Zero-Shot Machine Unlearning零射机器学习
err2023-01-01
err16
errOAAI
errChundawat, Vikram S.; Tarun, Ayush K.; Mandal, Murari; Kankanhalli, Mohan
err分享
err收藏
Selective and collaborative influence function for efficient recommendation unlearning
err2023-12-01
err4
errOAAI
errLi, Yuyuan; Chen, Chaochao; Zheng, Xiaolin; Zhang, Yizhao; Gong, Biao; Wang, Jun; Chen, Linxun
err分享
err收藏
EGANS: Evolutionary Generative Adversarial Network Search for Zero-Shot Learning
err2024-06-01
err7
errOAAI
errChen, Shiming; Chen, Shuhuang; Hou, Wenjin; Ding, Weiping; You, Xinge
err分享
err收藏
err分享
err收藏
学者 查看更多内容