arrow
返回

Parallel Time-Frequency Multi-Scale Attention with Dynamic Convolution for Environmental Sound Classification

delete2025-09-26
delete0
delete
OA
AI
H
Hongjie Wan
H
Hailei He *
李
李玉英 (Yuying Li)
DOI:10.3390/e27101007delete
delete原文链接
delete分享
delete收藏
查看原文
摘要

摘要

En 中文
卷积神经网络(CNN)模型被广泛应用于环境声音分类(ESC)。然而,二维卷积假设在时间和频率轴上具有平移不变性,而实际上频率维度不具备平移不变性。此外,单尺度卷积限制了感受野,导致特征表示不完整。为解决这些问题,我们引入了一个并行时频多尺度注意力(PTFMSA)模块,该模块通过整合多尺度下的局部和全局注意力来改进动态卷积,以克服上述问题。我们还引入了并行分支结构,以避免在提取时域和频域特征时信息相互干扰。此外,我们利用可学习参数,可在网络训练过程中动态调整不同分支的权重。基于此模块,我们开发了PTFMSAN,一种可直接处理原始波形用于ESC的紧凑型网络。为进一步强化学习效果,应用了类间(BC)训练。在ESC-50数据集上的实验表明,PTFMSAN优于基线模型,实现了90%的分类准确率,在基于CNN的网络中具有竞争力。我们还进行了消融实验以验证每个模块的有效性。
Keyword:
multi-scale convolution
CNN
dynamic convolution
environmental sound classification
deep learning
AI总结

AI总结

对已上传原文的论文进行重点信息的提取,主要内容包括:简要概述、研究摘要、背景介绍、关键亮点、图文解析、展望与总结。

期刊

Entropy 封面图
Entropy
IF:
2
论文数:
956
被引数:
2.4W

机构

B
Beijing University of Chemical Technology
学者数:
3.1W
论文数: 2.2W
被引数: 4.5W
引用论文

引用论文

err分享
err收藏
err分享
err收藏
MTF-CRNN: Multiscale Time-Frequency Convolutional Recurrent Neural Network for Sound Event Detection
err2020-01-01
err14
errOAAI
errZhang, Keming; Cai, Yuanwen; Ren, Yuan; Ye, Ruida; He, Liang
err分享
err收藏
Multitask Learning of Time-Frequency CNN for Sound Source Localization
err2019-01-01
err32
errOAAI
errPang, Cheng; Liu, Hong; Li, Xiaofei
err分享
err收藏
Environment Sound Event Classification With a Two-Stream Convolutional Neural Network
err2020-01-01
err29
errOAAI
errDong, Xifeng; Yin, Bo; Cong, Yanping; Du, Zehua; Huang, Xianqing
err分享
err收藏
Environment Sound Classification Using a Two-Stream CNN Based on Decision-Level Fusion
errSENSORS
IF3.5
err2019-04-11
err122
errOAAI
errSu, Yu; Zhang, Ke; Wang, Jingyu; Madani, Kurosh
err分享
err收藏
ImageNet Large Scale Visual Recognition ChallengeImageNet大规模视觉识别挑战
err2015-04-11
err2.7W
PREAI
errRussakovsky, Olga; Deng, Jia; Su, Hao; Krause, Jonathan; Satheesh, Sanjeev; Ma, Sean; Huang, Zhiheng; Karpathy, Andrej; Khosla, Aditya; Bernstein, Michael; Berg, Alexander C.; Fei-Fei, Li
err分享
err收藏
学者 查看更多内容