arrow
返回

Knowledge Distillation-Based Anomaly Detection via Adaptive Discrepancy Optimization

delete
delete0
PRE
AI
N
Ning Li
A
Ajian Liu
Z
Zhenwei Zhu
X
Xuxin Lin
H
Hui Ma
H
Hong‐Ning Dai
梁
梁延研 (Yanyan Liang)
DOI:10.1109/TII.2025.3574540delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
知识蒸馏已作为一种主要的异常检测解决方案出现,利用教师-学生(T-S)网络之间的特征差异来定位异常。然而,现有方法存在特征差异模糊的问题,这由于两个主要挑战而阻碍了有效的异常检测:1)过度泛化,即学生网络在异常区域过度模仿教师特征;2)T-S网络在正常区域中的语义偏差。为解决这些问题,我们提出了一个自适应差异优化(Ado)模块。该模块通过可学习的特征偏移自适应地校准特征差异,在异常区域减少过度泛化,并在正常区域选择性对齐语义特征。该通用模块可无缝集成到各种基于蒸馏的方法中。实验结果表明,该Ado模块在两个常用数据集上的11种不同知识蒸馏框架中显著提升了性能。特别地,当与Ado模块集成时,RD4AD在VisA数据集的像素级PRO上实现了22%的相对提升。此外,一个真实世界的键盘检测应用进一步验证了Ado模块的有效性。
Keyword:
Anomaly detection
defect detection
knowledge distillation
overgeneralization problem
semantic bias

期刊

IEEE Transactions on Industrial Informatics 封面图
IEEE Transactions on Industrial Informatics
IF:
9.9
论文数:
8.6K
被引数:
6.0W

机构

D
Department of Artificial Intelligence
学者数:
170
论文数: 98
被引数: 0
I
Institute of Automation
学者数:
539
论文数: 287
被引数: 220
M
Macau University of Science and Technology
学者数:
2.4K
论文数: 1.4K
被引数: 9.7K
H
Hong Kong Baptist University
学者数:
6.3K
论文数: 7.5K
被引数: 1.3W
学者 查看更多机构
引用论文

引用论文

err分享
err收藏
err分享
err收藏
err分享
err收藏
PaDiM: A Patch Distribution Modeling Framework for Anomaly Detection and Localization
err2021-03-05
err0
PREAI
errThomas Defard; Aleksandr Setkov; Angelique Loesch; Romaric Audigier
err分享
err收藏
Describing Textures in the Wild描述野外的纹理
err2014-06-01
err0
errOAAI
errMircea Cimpoi; Subhransu Maji; Iasonas Kokkinos; Sammy Mohamed; Andrea Vedaldi
err分享
err收藏
学者 查看更多内容