返回
An efficient Waveflow Vision Transformer for multi-scale NDE image processing
DOI:10.1080/10589759.2026.2658730.png)
摘要
En 中文
在工业物联网(IIoT)和无损检测4.0(NDE 4.0)中,大规模图像数据需要捕获全局结构特征和局部异常。这为特征提取模型在保留局部细节和建模全局依赖关系方面带来了挑战。具有多头自注意力(MHSA)的视觉Transformer(ViT)在建模长程依赖关系方面有效,但在局部特征捕获和计算成本方面存在困难。为解决这些问题,我们提出了Waveflow,一种集成多头发自注意力机制与瓶颈结构的方法。与现有的基于小波增强的ViT变体主要关注注意力层中的孤立小波分解不同,Waveflow引入了基于小波频率处理和瓶颈优化的协同设计,实现了更高效和全面的特征学习。在Waveflow中,所提出的小波多头自注意力(Wave-MHSA)与新颖的小波块稀疏性相结合,以巧妙地捕获全局和局部信息在空间、频率和通道域中的复杂细节。广泛的NDT实验表明,Waveflow优于基线方法,在NEU-DET数据集上达到mAP@0.5为81.3%,在ASSD数据集上为97.2%,在WCSD数据集上为78.8%。
Keyword:
Non-destructive non-destructive testing
vision transformers
multi-head self-attention
Discrete Wavelet Transform
Wavelet Block Sparsity
期刊
N
IF:
4.2
论文数:
1.7K
被引数:
2.1K
机构
引用论文
MSHRNet: a multi-scale high-resolution network for land cover classification from high spatial resolution remote sensing imagesMSHRNet:一种用于从高空间分辨率遥感图像进行土地覆盖分类的多尺度高分辨率网络
WaveMamba-YOLO: Combining frequency awareness and state-space modeling for defect localization
PLoS One
IF2.6
Mohammadi, S.; Sattarpanah Karganroudi, S.; Rahmanian, V. Advancements in Smart Nondestructive Evaluation of Industrial Machines: A Comprehensive Review of Computer Vision and AI Techniques for Infrastructure Maintenance. Machines 2025, 13, 11. [Google Scholar] [CrossRef]Mohammadi, S.; Sattarpanah Karganroudi, S.; Rahmanian, V. 工业机器智能无损评估技术的进展:计算机视觉和AI技术在基础设施维护中的综合综述. Machines 2025, 13, 11. [Google Scholar] [CrossRef]
Divide-and-Conquer: Confluent Triple-Flow Network for RGB-T Salient Object Detection分治法:用于RGB-T显著目标检测的融合三流网络
Jin, Z.; Qiu, Y.; Zhang, K.; Li, H.; Luo, W. MB-TaylorFormer V2: Improved Multi-branch Linear Transformer Expanded by Taylor Formula for Image Restoration. arXiv 2025, arXiv:2501.04486. [Google Scholar] [CrossRef] [PubMed]金, Z.; 邱, Y.; 张, K.; 李, H.; 罗W. MB-TaylorFormer V2:基于泰勒公式扩展的多分支线性变换器用于图像修复的改进. arXiv 2025, arXiv:2501.04486. [谷歌学术] [ CrossRef ] [PubMed]

