arrow
返回

Image classification-driven speech disorder detection using deep learning technique

delete2025-06-01
delete0
PRE
AI
N
Nasser Ali Aljarallah
A
Ashit Kumar Dutta *
A
Abdul Rahaman Wahab Sait
DOI:10.1016/j.slast.2025.100261delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
言语障碍影响个体生成声音或恰当利用嗓音的能力。神经性、发育性、物理性及创伤等因素可能引发言语障碍。言语损伤影响沟通、社交互动、教育和生活质量。成功的干预需要早期精确诊断,以便及时治疗这些病症。然而,言语-语言病理学家的临床检查耗时、主观,需要自动化言语障碍检测(SDD)模型。梅尔频谱图呈现多种言语障碍的视觉表征。通过分类梅尔频谱图,可识别各类言语障碍。本研究中,作者提出了一种基于图像分类的自动化SDD模型,用于分类梅尔频谱图以识别多种言语障碍。首先,采用小波变换(WT)混合技术,利用语音样本生成梅尔频谱图。开发了一种基于改进LEVIT转换器的特征提取方法。最后,使用集成学习(EL)方法对提取的特征进行分类,该方法包含以CatBoost和XGBoost为基础学习器,以极端随机树为元学习器。为减少计算资源,作者采用了量化感知训练(QAT)。他们运用谢尔力加性解释(SHAP)值提供模型可解释性。该模型使用Voice ICar fEDerico II(VOICED)和LANNA数据集进行了泛化。在参数量仅820万的条件下,该模型取得了99.1%的卓越准确率,证明了所提方法的重要性。所提模型增强了言语障碍分类,为构建可及、准确、高效的诊断工具提供了新前景。研究人员可整合多模态数据,以扩大模型在语言和方言间的应用,并优化所提模型,以适应实时临床和远程医疗部署。
Keyword:
Speech disorders
Assistive technologies
Deep learning
Feature extraction
Vison transformer
Image classification

期刊

SLAS Technology 封面图
SLAS Technology
IF:
3.7
论文数:
246
被引数:
1.1K

机构

K
King Faisal University
学者数:
4.4K
论文数: 4.4K
被引数: 5.0K
A
Almaarefa University
学者数:
760
论文数: 809
被引数: 1.1K
引用论文

引用论文

Transformers in medical imaging: A survey医学影像中的变形金刚: 调查
err2023-08-01
err250
errOAAI
errShamshad, Fahad; Khan, Salman; Zamir, Syed Waqas; Khan, Muhammad Haris; Hayat, Munawar; Khan, Fahad Shahbaz; Fu, Huazhu
err分享
err收藏
Machine learning assistive application for users with speech disorders
err2021-05-01
err23
PREAI
errMulfari, Davide; Meoni, Gabriele; Marini, Marco; Fanucci, Luca
err分享
err收藏
err分享
err收藏
err分享
err收藏
Voice Pathology Detection and Classification Using Convolutional Neural Network Model
err2020-05-27
err0
errOAAI
errMazin Abed Mohammed; Karrar Hameed Abdulkareem; Salama A. Mostafa; Mohd Khanapi Abd Ghani; Mashael S. Maashi; Begonya Garcia-Zapirain; Ibon Oleagordia; Hosam Alhakami; Fahad Taha AL-Dhief
err分享
err收藏
学者 查看更多内容